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内 容 简 介 

本 书 详尽 地 阐述 了 软件 测试 的 基础 知识 及 其 相关 的 实用 技术 。 内 容 包括 软件 测试 概述 .软件 测试 
过 程 与 策略 、. 黑 盒 测 试 及 其 实例 设计 、 白 盒 测 试 及 其 实例 设计 、 软 件 测试 计划 与 文档 .软件 自动 化 测试 、 
软件 测试 管理 ,面向 对 象 的 软件 测试 .Web 网 站 测试 及 软件 测试 职业 。 

本 书 结合 教学 实例 突出 基本 知识 和 基本 概念 的 表述 ,注重 内 容 的 先进 性 .系统 性 和 实用 人 性 ,力求 反 
映 软件 测试 发 展 的 最 新 成 果 。 将 测试 与 软件 工程 密切 结合 .使 读者 可 以 更 好 地 理解 和 掌握 软件 测试 的 
内 容 ,并 迅速 地 运用 到 实际 测试 工作 中 去 。 

本 书 可 作为 高 等 院 校 .高 职高 专 院 校 及 相关 软件 学 院 软件 技术 专业 和 计算 机 相关 专业 的 教材 ,也 可 
作为 软件 测试 技术 培训 的 教材 ,同时 还 可 供 从 事 软件 测试 的 工作 人 员 参 阅 。 


本 书 封面 贴 有 清华 大 学 出 版 社 防 伪 标签 ,无 标签 者 不 得 销售 。 
版 权 所 有 ,侵权 必 究 。 侵 权 举报 电话 : 010-62782989 13701121933 
图 书 在 版 编目 (CIP) 数 据 


软件 测试 教程 / 杜 文 洁 主 编 . 一 北京 : 清华 大 学 出 版 社 ,2008. 4 
21 世纪 高 职高 专 规划 教材 . 软件 专业 系列 
ISBN 978-7-302-16788-4 


I. 软 … 工 . 杜 … 于. 软件 一 测试 一 高 等 学 校 : 技术 学 校 一 教材 NN. TP311.5 
中 国 版 本 图 书馆 CIP 数据 核 字 (2008) 第 004136 号 


责任 编辑 : 束 传 政 田 梅 


责任 校对 : 囊 劳 

责任 印 制 : 

出 版 发 行 : 清华 大 学 出 版 社 地 址 : 北京 清华 大 学 学 研 大 厦 A 座 
http://www. tup. com. cn 邮 编 : 100084 
社 总 机 : 010-62770175 邮 购 : 010-62786544 


投稿 与 读者 服务 : 010-62776969,c-service@tup. tsinghua. edu. cn 
质 量 反 馈 : 010-62772015 ,zhiliang@tup. tsinghua. edu. cn 


印 刷 者 : 

装 订 者 : 

经 销 : 全 国 新 华 书店 

开 本 : 185X230 印 张 : 14.25 字 数 : 292 千 字 

版 ”次 : 2008 年 4 月 第 1 版 印 次 : 2008 年 4 月 第 1 次 印刷 
印 数 : 1 一 000 

定 价 : .00 元 


本 书 如 存在 文字 不 清 、 漏 印 . 缺 页 . 倒 页 . 脱 页 等 印 装 质量 问题 ,请 与 清华 大 学 出 版 社 出 版 部 联系 调换 。 联 系 电 话 : 
010-62770177 转 3103 产品 编号 : 024865-01 


出 版 说 明 


高 职高 专 教育 是 我 国 高 等 教育 的 重要 组 成 部 分 ,担负 着 为 国家 培养 并 输送 生产 、 建 
设 ,管理 .服务 第 一 线 高 素质 技术 应 用 型 人 才 的 重任 。 

进入 21 世纪 后 ,高 职高 专 教育 的 改革 和 发 展 呈 现 出 前 所 未 有 的 发 展 势头 ,学 生 规 模 已 
占 我 国 高 等 教育 的 半壁 江山 ,成 为 我 国 高 等 教育 的 一 支 重 要 的 生力军 ; 办 学 理念 上 ,“ 以 就 
业 为 导向 ?成 为 高 等 职业 教育 改革 与 发 展 的 主旋律 。 近 两 年 来 ,教育 部 召开 了 三 次 产 学 研 交 
流 会 ,并 启动 四 个 专业 的 “国家 技能 型 紧缺 人 才 培 养 项 目 ”, 同 时 成 立 了 35 所 示范 性 软件 职 
业 技 术 学 院 ,进行 两 年 制 教学 改革 试点 。 这 些 举措 都 表明 国家 正在 推动 高 职高 专 教育 进行 
深层 次 的 重大 改革 ,向 培养 生产 、 服 务 第 一 线 真 正 需要 的 应 用 型 人 才 的 方向 发 展 。 

为 了 顺应 当前 我 国 高 职高 专 教育 的 发 展 形势 ,配合 高 职高 专 院 校 的 教学 改革 和 教材 
建设 ,进一步 提高 我 国 高 职高 专 教育 教材 质量 ,在 教育 部 的 指导 下 ,清华 大 学 出 版 社 组 织 
出 版 了 “21 世纪 高 职高 专 规划 教材 ”。 

为 推动 规划 教材 的 建设 ,清华 大 学 出 版 社 组 织 并 成 立 了 “高 职高 专 教育 教材 编审 委员 
会 ”, 旨 在 对 清华 版 的 全 国 性 高 职高 专 教材 及 教材 选 题 进行 评审 ,并 向 清华 大 学 出 版 社 推 
荐 各 院 校 办 学 特色 鲜明 、 内 容 质 量 优秀 的 教材 选 题 。 教 材 选 题 由 个 人 或 各 院 校 推荐 ,经 编 
审 委员 会 认真 评审 ,最 后 由 清华 大 学 出 版 社 出 版 。 编 审 委员 会 的 成 员 皆 来 源 于 教改 成 效 
大 、 办 学 特色 鲜明 、 师 资 实力 强 的 高 职高 专 院 校 普通 高 校 以 及 著名 企业 ,教材 的 编写 者 和 
审定 者 都 是 从 事 高 职高 专 教育 第 一 线 的 骨干 教师 和 专家 。 

编审 委员 会 根据 教育 部 最 新 文件 和 政策 ,规划 教材 体系 ,比如 部 分 专业 的 两 年 制 教材 ; 
“以 就 业 为 导向 ”, 以 “专业 技能 体系 ”为 主 ,突出 人 才 培 养 的 实践 性 ,应 用 性 的 原则 ,重新 组 织 
系列 课程 的 教材 结构 ,整合 课程 体系 ; 按照 教育 部 制定 的 “高 职高 专 教育 基础 课程 教学 基本 
要 求 ”, 教 材 的 基础 理论 以 “必要 、 够 用 ”为 度 , 突 出 基础 理论 的 应 用 和 实践 技能 的 培养 。 

本 套 规划 教材 的 编写 原则 如 下 : 

(1) 根据 岗位 群 设置 教材 系列 ,并 成 立 系列 教材 编审 委员 会 ; 

(2) 由 编审 委员 会 规划 教材 .评审 教材 ; 

(3) 重点 课程 进行 立体 化 建设 ,突出 案例 式 教学 体系 ,加 强 实 训 教材 的 出 版 ,完善 教 
学 服务 体系 ; 

(4) 教材 编写 者 由 具有 丰富 教学 经 验 和 多 年 实践 经 历 的 教师 共同 组 成 ,建立 “ 双 师 
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型 "编者 体系 。 
本 套 规划 教材 涵盖 了 公共 基础 课 、 计 算 机 电子 信息 、 机 械 、 经 济 管理 以 及 服务 等 大 类 
的 主要 课程 ,包括 专业 基础 课 和 专业 主干 课 。 目 前 已 经 规划 的 教材 系列 名 称 如 下 : 


。 公共 基础 课 。 机 械 类 
公共 基础 课 系 列 机 械 基础 系列 
机 械 设 计 与 制造 专业 系列 
I 数控 技术 系列 
计算 机 基础 教育 系列 模具 设计 与 制造 系列 
计算 机 专业 基础 系列 。 经 济 管理 类 
ear 经 济 管理 基础 系列 
由 二 测 市 场 营销 系列 
人 财务 会 计 系 列 
电子 商务 专业 系列 企业 管理 系列 
。 电 子 信息 类 物流 管理 系列 
财政 金融 系列 
电子 信息 基础 系列 国际 商务 系列 
微 电 子 技术 系列 
通信 技术 系列 ”服务 类 
电气 .自动化 .应 用 电子 技术 系列 艺术 设计 系列 


本 套 规 划 教材 的 系列 名 称 根据 学 科 基础 和 岗位 群 方向 设置 ,为 各 高 职高 专 院 校 提供 
“自助 餐 ” 形 式 的 教材 。 各 院 校 在 选择 课程 需要 的 教材 时 ,专业 课程 可 以 根据 岗位 群 选择 
系列 ; 专业 基础 课程 可 以 根据 学 科 方 向 选择 各 类 的 基础 课 系 列 。 例 如 ,数控 技术 方向 的 
专业 课程 可 以 在 “数控 技术 系列 "选择; 数控 技术 专业 需要 的 基础 课程 ,属于 计算 机 类 课程 
的 可 以 在 “计算 机 基础 教育 系列 "和 “计算 机 应 用 系列 ”选择 ,属于 机 械 类 课程 的 可 以 在 “机 械 
基础 系列 ”选择 ,属于 电子 信息 类 课程 的 可 以 在 “电子 信息 基础 系列 ”选择 。 依 此 类 推 。 

为 方便 教师 授课 和 学 生 学 习 , 清 华 大 学 出 版 社 正在 建设 本 套 教材 的 教学 服务 体系 。 本 套 
教材 先期 选择 重点 课程 和 专业 主干 课程 ,进行 立体 化 教材 建设 : 加 强 多 媒体 教学 课件 或 电子 教 
案 、 素 材 库 .学习 盘 、 学 习 指 导 书 等 形式 的 制作 和 出 版 ,开发 网 络 课程 。 学 校 在 选用 教材 时 ,可 
通过 邮件 或 电话 与 我 们 联系 获取 相关 服务 ,并 通过 与 各 院 校 的 密切 交流 ,使 其 日 夷 完善 。 

高 职高 专 教育 正 处 于 新 一 轮 改革 时 期 ,从 专业 设置 .课程 体系 建设 到 教材 编写 ,依然 
是 新 课题 。 和 希望 各 高 职高 专 院 校 在 教学 实践 中 积极 提出 意见 和 建议 ,并 向 我 们 推荐 优秀 
选 题 。 反 馈 意见 请 发 送 到 E-mail: gzgz@tup. tsinghua. edu. cn。 清 华 大 学 出 版 社 将 对 已 
出 版 的 教材 不 断 地 修订 ,完善 ,提高 教材 质量 ,完善 教材 服务 体系 ,为 我 国 的 高 职高 专 教育 
出 版 优秀 的 高 质量 的 教材 。 


高 职高 专 教育 教材 编审 委员 会 
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软件 测试 是 对 软件 需求 分 析 、 设 计 规 格 说 明和 编码 的 最 终审 核 ,是 软件 质量 保证 的 关 
键 步骤 。 随 着 软件 产业 的 迅速 发 展 ,市 场 对 于 进行 专业 化 ` 高 效 化 软件 测试 的 需求 越 来 越 
强烈 ,软件 测试 职业 的 价值 越发 显著 ,软件 测试 技术 作为 一 门 新 兴 产 业 迅速 发 展 起 来 。 在 
这 种 形势 下 ,计算 机 专业 学 生 对 于 软件 测试 知识 的 学 习 与 应 用 就 显得 尤为 重要 ,因此 一 本 
好 的 软件 测试 教材 对 于 学 习 者 是 必 不 可 少 的 。 

现 阶段 国内 软件 测试 教学 处 于 起 步 阶段 ,我 们 依据 高 职高 专 软件 测试 课程 教学 大 纲 
所 规定 的 教学 要 求 编写 本 教材 ,把 多 年 软件 测试 教学 经 验 和 教学 实践 成 果 融 人 本 教材 中 ， 
在 内 容 分 布 上 充分 考虑 理论 与 实践 相 结合 的 原则 。 

本 书 选材 注意 把 握 高 职高 专 学 生 的 专业 知识 背景 与 接受 能 力 ,由 浅 入 深 ,以 “实例 教 
学 ”的 方法 激发 学 生 的 学 习 兴 趣 。 在 编写 上 ,注重 内 容 的 先进 性 、 系 统 性 和 实用 性 ,力求 反 
映 软件 测试 发 展 的 最 新 成 果 。 在 结构 安排 上 ,深入 阐述 软件 测试 的 基础 理论 知识 ,循序 渐 
进 , 做 到 了 理论 和 实际 相 结合 。 在 每 章 内 容 后 面 均 附 有 小 结 和 课 后 习题 。 

本 书 共 分 10 章 ,系统 地 介绍 了 软件 测试 的 主要 内 容 , 具 体 如 下 : 

1. 软件 测试 概述 

介绍 了 软件 测试 的 背景 .基本 理论 ,以 及 软件 测试 与 软件 开发 的 关系 。 

2. 软件 测试 过 程 与 策略 

介绍 了 软件 测试 的 复杂 性 与 经 济 性 分 析 , 描述 了 软件 测试 的 流程 ,其 中 包括 单元 测 
试 、 集 成 测试 .确认 测试 .系统 测试 和 验收 测试 5 个 测试 阶段 。 最 后 ,介绍 了 两 组 测试 方 
法 ,分 别 是 静态 测试 与 动态 测试 、 黑 盒 测试 与 白 盒 测 试 。 

3. 黑 盒 测试 及 其 实例 设计 

具体 介绍 了 黑 盒 测 试 的 各 种 方法 ,其 中 包括 等 价 类 划分 法 ,边界 值 分 析 法 ,决策 表 法 、 
因果 图 法 ,并 且 分 别 配 有 测试 用 例 来 具体 说 明 这 4 种 方法 。 最 后 描述 了 黑 盒 测试 的 一 个 
实例 设计 。 

4. 白 盒 测试 及 其 实例 设计 

具体 介绍 了 白 盒 测试 的 各 种 方法 ,其 中 包括 逻辑 覆盖 测试 和 路 径 分 析 测试 两 种 主要 
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方法 。 这 部 分 还 介绍 了 循环 测试 .变异 测试 和 程序 插 装 等 其 他 白 盒 测试 方法 。 最 后 ,列举 
了 一 个 采用 覆盖 测试 方法 的 测试 实例 和 一 个 采用 独立 路 径 测试 方法 的 测试 实例 。 

5. 软件 测试 计划 与 文档 

详细 阐述 了 测试 计划 的 制定 、 测 试 文档 的 主要 内 容 和 软件 生命 周期 各 阶段 的 测试 任 
务 与 可 交付 的 文档 ,列举 了 测试 用 例 、 测 试 总 结 报 告 的 设计 内 容 。 

6. 软件 自动 化 测试 

介绍 了 软件 自动 化 测试 .自动 化 测试 的 设计 与 开发 以 及 常用 的 自动 化 测试 工具 。 

7. 软件 测试 管理 

具体 叙述 了 软件 质量 保证 与 软件 测试 的 关系 、 测 试 的 组 织 管 理 和 测试 团队 的 职责 ,以 
及 ISO 9000 标准 和 能 力 成 熟 度 模 型 (CMM)。 

8. 面向 对 象 的 软件 测试 

阐述 了 面向 对 象 的 软件 测试 .面向 对 象 的 软件 .面向 对 象 测试 与 传统 测试 的 区 别 和 面 
向 对 象 的 测试 方法 。 

9. Web 网 站 测试 

阐述 了 Web 网 站 的 测试 、 功 能 测试 ,性 能 测试 .安全 性 测试 .可 用 性 /可 靠 性 测试 . 配 
置 和 兼容 性 测试 数据库 测试 。 

10. 软件 测试 职业 

介绍 了 软件 测试 职业 和 职位 .软件 测试 资源 的 获取 途径 和 软件 测试 工程 师 的 素质 

本 书 由 杜 文 洁 担任 主编 , 景 秀丽 . 白 萍 担任 副 主 编 。 第 1 章 、 第 10 章 由 杜 文 洁 编写 ， 
第 2 章 , 第 4 章 , 第 5 章 . 第 7 章 , 第 9 章 由 景 秀丽 编写 ,第 3 章 , 第 6 章 、 第 8 章 由 白 萍 编 
写 。 全 书 由 杜 文 洁 统 稿 完 成 。 

由 于 水 平和 时 间 有 限 , 书 中 难免 存在 一 些 玻 漏 ,请 读者 批评 指正 。 
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本 章 概述 
本 章 介绍 了 软件 测试 的 发 展 历史 ,软件 测试 技术 的 分 类 方法 .测试 标准 、 测 试 原 则 , 阐 
述 了 软件 测试 与 软件 开发 的 关系 。 


1.1 软件 测试 的 背景 


软件 的 质量 就 是 软件 的 生命 ,为 了 保证 软件 的 质量 ,人 们 在 长 期 的 开发 过 程 中 积累 了 
许多 经 验 并 形成 了 许多 行 之 有 效 的 方法 。 但 是 借助 这 些 方法 ,我 们 只 能 尽量 减少 软件 中 
的 错误 和 不 足 , 却 不 能 完全 避免 所 有 的 错误 。 

由 于 软件 是 人 脑 的 高 度 智力 化 的 体现 和 产品 这 一 特殊 性 ,不 同 于 其 他 科技 和 生产 领 
域 ,因此 软件 与 生 俱 来 就 有 可 能 存在 着 缺陷 。 

在 开发 大 型 软件 系统 的 漫长 过 程 中 , 面 对 纷 繁复 杂 的 各 种 现实 情况 ,人 的 主观 认识 和 
客观 现实 之 间 往 往 存在 着 差距 ,开发 过 程 中 的 各 类 人 员 之 间 的 交流 和 配合 也 往往 并 不 是 
尽善尽美 的 。 

如 果 我 们 不 能 在 软件 正式 投入 运行 之 前 发 现 并 纠正 这 些 错误 ,那么 这 些 错 误 最 终 必 
然 会 在 软件 的 实际 运行 过 程 中 暴露 出 来 。 到 那 时 ,不 仅 改正 这 些 错误 要 付出 很 大 的 代价 ， 
而 且 往往 会 造成 无 法 弥补 的 损失 。 

如 何 防 止 和 减少 这 些 可 能 存在 的 问题 呢 ? 回答 是 进行 软件 测试 。 测 试 是 最 有 效 的 排 
除 和 防止 软件 缺陷 与 故障 的 手段 ,并 由 此 促进 了 软件 测试 理论 与 技术 实践 的 快速 发 展 。 
新 的 测试 理论 ,测试 方法 、 测 试 技术 手段 在 不 断 涌 出 ,软件 测试 机 构 和 组 织 也 在 迅速 产生 
和 发 展 , 由 此 软件 测试 技术 职业 也 同步 完善 和 健全 起 来 。 
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1.1.1 软件 缺陷 


1. 软件 错误 案例 研究 

人 们 常常 不 把 软件 当 回 事 , 没 有 真正 意识 到 它 已 经 深入 渗透 到 我 们 的 日 常生 活 中 , 软 
件 在 电子 信息 领域 里 无 处 不 在 。 现 在 有 许多 人 如 果 一 天 不 上 网 查看 电子 邮件 ,简直 就 没 
法 过 下 去 。 我 们 已 经 离 不 开 24 小 时 包 于 投递 服务 、 长 途 电 话 服 务 和 最 先进 的 医疗 服 
务 了 。 

然而 软件 是 由 人 编写 开发 的 ,是 一 种 逻辑 思维 的 产品 ,尽管 现在 软件 开发 者 采取 了 一 
系列 有 效 措施 ,不 断 地 提高 软件 开发 质量 ,但 仍然 无 法 完全 避免 软件 (产品 ) 会 存在 各 种 各 
样 的 缺陷 。 

下 面 以 实例 来 说 明 。 

(1) 迪斯尼 的 狮子 王 游戏 软件 缺陷 

1994 年 秋天 ,迪斯尼 公司 发 布 了 第 一 个 面向 儿童 的 多 媒体 光盘 游戏 一 一 狮子 王 动画 
故事 书 (The Lion King Animated Storybook)。 尽 管 当时 已 经 有 许多 其 他 公司 在 儿童 游 
戏 市 场 上 运作 多 年 ,但 是 这 次 是 迪斯尼 公司 首次 进军 儿童 游戏 市 场 ,所 以 进行 了 大 量 促销 
宣传 。 结 果 ,销售 额 非常 可 观 ,该 游戏 成 为 孩子 们 在 当年 节假日 的 “ 必 买 游戏 "。 然 而 后 来 
却 飞 来 横 祸 。1994 年 12 月 26 日 ,圣诞 节 过 后 的 第 一 天 ,迪斯尼 公司 的 客户 支持 电话 开 
始 响 个 不 停 。 很 快 ,电话 支持 技术 员 们 就 淹没 在 来 自 于 愤怒 的 家 长 并 伴随 着 玩 不 成 游戏 
的 孩子 们 回 叫 的 电话 之 中 。 报 纸 和 电视 新 闻 进 行 了 大 量 的 报道 。 

后 来 证 实 , 迪 斯 尼 公 司 未 能 对 市 面 上 投入 使 用 的 许多 不 同类 型 的 PC 机 型 进行 广泛 
的 测试 。 软 件 只 能 在 极 少数 系统 中 工作 正常 一 一 例如 在 迪斯尼 程序 员 用 来 开发 游戏 的 系 
统 中 一 一 但 在 大 多 数 公 众 使 用 的 系统 中 却 不 能 运行 。 

(2) 爱国 者 导弹 防御 系统 缺陷 

爱国 者 导弹 防御 系统 是 里 根 总 统 提出 的 战略 防御 计划 ( 即 星 球 大 战 计划 ) 的 缩 略 版 
本 , 它 首次 应 用 在 海湾 战争 中 对 抗 伊拉克 飞毛腿 导弹 的 防御 战 中 。 尽 管 对 系统 赞誉 的 报 
道 不 绝 于 耳 ,但 是 它 确实 在 对 抗 几 枚 导弹 中 失利 ,包括 一 次 在 沙特 阿拉 伯 的 多 哈 击毙 了 
28 名 美国 士兵 。 分 析 发 现 症结 在 于 一 个 软件 缺陷 ,系统 时 钟 的 一 个 很 小 的 计时 错误 积累 
起 来 到 14 小 时 后 ,跟踪 系统 不 再 准确 。 在 多 哈 的 这 次 袭击 中 ,系统 已 经 运行 了 100 多 个 
小 时 。 

(3) 千年 虫 问题 

20 世纪 70 年 代 早 期 的 某 个 时 间 , 某 位 程序 员 正在 为 本 公司 设计 开发 工资 系统 。 他 
使 用 的 计算 机 存储 空间 很 小 ,迫使 他 尽量 节省 每 一 个 字 节 。 他 将 自己 的 程序 压缩 得 比 其 
他 任何 人 都 紧凑 。 使 用 的 其 中 一 个 方法 是 把 4 位 数 年 份 .例如 1973 年 ,缩减 为 2 位 数 ， 
73。 因 为 工资 系统 相当 依赖 于 日 期 的 处 理 ,所 以 需要 节省 大 量 的 存储 空间 。 他 简单 地 认 
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为 只 有 在 到 达 2000 年 , 那 时 他 的 程序 开始 计算 00 或 01 这 样 的 年 份 时 间 题 才 会 产生 。 虽 
然 他 知道 会 出 这 样 的 问题 ,但 是 他 认定 在 25 年 之 内 程序 肯定 会 升级 或 蔡 换 ,而 且 眼 前 的 
任务 比 现在 计划 遥 不 可 及 的 未 来 更 加 重要 。 然 而 这 一 天 毕竟 到 来 了 。1995 年 他 的 程序 
仍然 在 使 用 ,而 他 退休 了 , 谁 也 不 会 想到 如 何 深入 到 程序 中 检查 2000 年 兼容 问题 ,更 不 用 
说 去 修改 了 。 

估计 全 球 各 地 更 换 或 升级 类 似 的 前 者 程序 以 解决 潜在 的 2000 年 问题 的 费用 已 经 达 
数 千 亿美 元 。 

(4) 美国 航天 局 火星 登陆 探测 器 缺陷 

1999 年 12 月 3 日 ,美国 航天 局 的 火星 极地 登陆 者 号 探测 器 试图 在 火星 表面 着 陆 时 
失踪 。 一 个 故障 评估 委员 会 调查 了 故障 ,认定 出 现 故 障 的 原因 极 可 能 是 一 个 数据 位 被 意 
外 置 位 。 最 令 人 震惊 的 问题 是 为 什么 没有 在 内 部 测试 时 发 现 呢 。 

从 理论 上 看 ,着 陆 的 计划 是 这 样 的 : 当 探 测 器 向 火星 表面 降落 时 , 它 将 打开 降落 伞 减 
组 探测 器 的 下 降 速度 。 降 落 伞 打开 几 秒 钟 后 , 探测 器 的 三 条 腿 将 迅速 撑 开 ,并 锁定 位 置 ， 
准备 着 陆 。 当 探测 器 离 地 面 1800 米 时 , 它 将 丢弃 降落 伞 , 点 燃 着 陆 推 进 器 , 缓 缓 地 降落 到 
地 面 。 

美国 航天 局 为 了 省 钱 ,简化 了 确定 何 时 关闭 着 陆 推进 器 的 装置 。 为 了 替代 其 他 太空 
船上 使 用 的 贵重 雷达 ,他 们 在 探测 器 的 脚 部 装 了 一 个 廉价 的 触 点 开关 ,在 计算 机 中 设置 一 
个 数据 位 来 控制 触 点 开关 关闭 燃料 。 很 简单 ,探测 器 的 发 动机 需要 一 直 点 火 工 作 ,直到 脚 
“着 地 ”为 止 。 

遗憾 的 是 ,故障 评估 委员 会 在 测试 中 发 现 , 许 多 情况 下 , 当 探测 器 的 脚 迅 速 撑 开 准备 
着 陆 时 ,机 械 震 动 也 会 触发 着 陆 触 点 开关 ,设置 致命 的 错误 数据 位 。 设 想 探测 器 开始 着 陆 
时 ,计算 机 极 有 可 能 关闭 着 陆 推进 器 ,这 样 火星 极地 登陆 者 号 探测 器 飞船 下 坠 1800 米 之 
后 冲 向 地 面 , 撞 成 碎片 。 

结果 是 灾难 性 的 ,但 背后 的 原因 却 很 简单 。 登 陆 探测 器 经 过 了 多 个 小 组 测试 。 其 中 
一 个 小 组 测试 飞船 的 脚 折 又 过 程 , 男 一 个 小 组 测试 此 后 的 着 陆 过 程 。 前 一 个 小 组 不 去 注 
意 着 陆 数 据 是 否 置 位 这 不 是 他 们 负责 的 范围 ; 后 一 个 小 组 总 是 在 开始 复位 之 前 复位 
计算 机 ,清除 数据 位 。 双 方 独立 工作 都 做 得 很 好 ,但 合 在 一 起 就 不 是 这 样 了 。 

(5) 金山 词霸 缺陷 

在 国内 ,“ 金 山 词 霸 ” 是 一 个 很 著名 的 词典 软件 ,应 用 范围 极 大 ,对 使 用 中 文 操作 的 用 
户 帮 助 很 大 ,但 它 也 存在 不 少 缺陷 。 例 如 输入 “cube”, 词 霸 会 在 示例 中 显示 3 二 9 的 错 
误 ; 又 如 ,如 果 用 鼠标 取 词 “dynamically”( 力 学 ,动力 学 ) ,词霸 会 出 现 其 他 不 同 的 单词 
“dynamite n. 炸药 ”的 显示 错误 。 

(6) 英特尔 奔腾 浮 点 除法 缺陷 

在 计算 机 的 “计算 器 ”程序 中 输入 以 下 算式 : 
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(4195835/3145727) * 3145727 一 4195835 

如 果 答 案 是 0, 就 说 明 计算 机 没 问 题 。 如 果 得 出 别 的 结果 ,就 表示 计算 机 使 用 的 是 带 
有 浮 点 除法 软件 缺陷 的 老式 英特尔 奔腾 处 理 器 一 一 这 个 软件 缺陷 被 烧 录 在 一 个 计算 机 芯 
片 中 ,并 在 制作 过 程 中 反复 生产 。 

1994 年 10 月 30 日 ,弗吉尼亚 州 Lynchburg 学 院 的 Thomas R. Nicely 博士 在 他 的 一 
个 实验 中 ,用 奔腾 PC 机 解决 一 个 除法 问题 时 ,记录 了 一 个 想不到 的 结果 ,得 出 了 错误 的 
结论 。 他 把 发 现 的 问题 放 到 因特网 上 ,随后 引发 了 一 场 风 暴 ,成 千 上 万 的 人 发 现 了 同样 的 
问题 ,并 且 发 现在 另外 一 些 情 形 下 也 会 得 出 错误 的 结果 。 万 幸 的 是 ,这 种 情况 很 少见 , 仅 
仅 在 进行 精度 要 求 很 高 的 数学 .科学 和 工程 计算 中 才 会 导致 错误 。 大 多 数 用 来 进行 税务 
处 理 和 商务 应 用 的 用 户 根本 不 会 遇 到 此 类 问题 。 

这 件 事情 引 人 关 注 的 并 不 是 这 个 软件 缺陷 ,而 是 英特尔 公司 解决 问题 的 方式 ， 

。 他 们 的 软件 测试 工程 师 在 芯片 发 布 之 前 进行 内 部 测试 时 已 经 发 现 了 这 个 问题 。 

英特尔 的 管理 层 认 为 这 没有 严重 到 要 保证 修正 ,甚至 公开 的 程度 。 

。 当 软 件 缺陷 被 发 现时 ,英特尔 通过 新 闻 发 布 和 公开 声明 试图 弱化 这 个 问题 的 已 知 
严重 性 。 
受到 压力 时 ,英特尔 承诺 更 换 有 问题 的 芯片 ,但 要 求 用 户 必须 证 明 自 己 受 到 缺陷 
的 影响 。 

与 论 哗然 。 互 联网 新 闻 组 里 充斥 着 愤怒 的 客户 要 求 英 特 尔 解决 问题 的 呼声 。 新 闻 报 
道 把 英特尔 公司 描绘 成 不 关心 客户 和 缺乏 诚信 者 。 最 后 ,英特尔 为 自己 处 理 软件 缺陷 的 
行为 道歉 并 拿 出 4 亿 多 美元 来 支付 更 换 问 题 芯 片 的 费用 。 现 在 英特尔 在 Web 站 点 上 报 
告 已 发 现 的 问题 ,并 认真 查看 客户 在 互联 网 新 闻 组 里 所 留 下 的 反馈 意见 。 


2. 软件 缺陷 的 定义 

从 上 述 的 案例 中 可 以 看 到 软件 发 生 错 误 时 将 造成 灾难 性 危害 或 对 用 户 产 生 各 种 
影响 。 

在 这 些 事 件 中 ,显然 软件 未 按 预 期 目标 运行 。 作 为 软件 测试 员 , 可 能 会 发 现 大 多 数 缺 
陷 不 如 上 面 所 列举 的 实例 那么 明显 ,而 对 于 一 些 简单 而 细微 的 错误 ,很 难 做 到 真正 区 分 哪 
些 是 真正 的 错误 ,哪些 不 是 。 对 于 软件 存在 的 各 种 问题 我 们 都 称 为 软件 缺陷 或 软件 故障 。 
在 英文 中 人 们 喜欢 用 一 个 不 贴切 但 已 经 专用 的 词 *bug” 表 示 。 

软件 缺陷 即 计算 机 系统 或 者 程序 中 存在 的 任何 一 种 破坏 正常 运行 能 力 的 问题 错误， 
或 者 隐藏 的 功能 缺陷 、 瑕 症 。 缺 陷 会 导致 软件 产品 在 某 种 程度 上 不 能 满足 用 户 的 需要 。 
对 于 软件 缺陷 的 准确 定义 ,通常 有 以 下 5 条 描述 : 

@ 软件 未 实现 产品 说 明 书 要 求 的 功能 。 

@ 软件 出 现 了 产品 说 明 书 指明 不 会 出 现 的 错误 。 
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@ 软件 实现 了 产品 说 明 书 未 提 到 的 功能 。 

@ 软件 实现 了 产品 说 明 书 虽 未 明确 指出 但 应 该 实现 的 目标 。 

@ 软件 难以 理解 ,不 易 使 用 ,运行 缓慢 或 者 终端 用 户 认为 不 好 。 

为 了 更 好 地 理解 每 一 条 规则 ,我 们 以 计算 器 为 例 进行 说 明 。 

计算 器 的 产品 说 明 书 声称 它 能 够 准确 无 误 地 进行 加 、 减 、 乘 、 除 运算 。 当 你 拿 到 计算 
器 后 , 按 下 (十 ) 键 ,结果 什么 反应 也 没有 ,根据 第 条 规则 ,这 是 一 个 缺陷 。 假 如 得 到 错误 
答案 ,根据 第 条 规则 ,这 同样 是 一 个 缺陷 。 

车 产品 说 明 书 声称 计算 器 永远 不 会 月 演 、 锁 死 或 者 停止 反应 。 当 你 任意 敲 键盘 ,计算 
器 停止 接受 输入 ,根据 第 @ 条 规则 ,这 是 一 个 缺陷 。 

车 用 计算 器 进行 测试 ,发 现 除了 加 ,、 减 、 乘 、 除 之 外 它 还 可 以 求 平方 根 ,说 明 书 中 从 没 
提 到 这 一 功能 ,根据 第 @ 条 规则 ,这 是 软件 缺陷 。 软 件 实现 了 产品 说 明 书 未 提 到 的 功能 。 

车 在 测试 计算 器 时 ,发 现 电 池 没 电 会 导致 计算 不 正确 ,但 产品 说 明 书 未 指出 这 个 问 
题 。 根 据 第 @ 条 规则 ,这 是 个 缺陷 。 

第 @ 条 规则 是 全 面 的 。 如 果 软 件 测试 员 发 现 某 些 地 方 不 对 劲 ,无 论 什么 原因 ,都 要 认 
定 为 缺陷 。 如 “二 =” 键 布置 的 位 置 极其 不 好 按 ; 或 在 明亮 光 下 显示 屏 难 以 看 清 。 根据 第 
回 条 规则 ,这 些 都 是 缺陷 。 

美国 商务 部 国家 标准 和 技术 研究 所 (NIST) 进 行 的 一 项 研究 表明 ,软件 中 的 bug 每 年 
给 美国 经 济 造成 的 损失 高 达 595 亿美 元 。 说 明 软 件 中 存在 的 缺陷 所 造成 的 损失 是 巨大 
的 ,从 反面 又 一 次 证 明 软 件 测试 的 重要 性 。 如 何 尽 早 彻 底 地 发 现 软件 中 存在 的 缺陷 是 一 
项 非常 复杂 ,需要 创造 性 和 高 度 智慧 的 工作 。 同 时 ,软件 的 缺陷 是 软件 开发 过 程 中 的 重要 
属性 ,反映 软件 开发 过 程 中 需求 分 析 、 功 能 设计 、 用 户 界面 设计 编程 等 环节 所 隐 含 的 问 
题 ,也 为 项 目 管理 ,过 程 改造 提供 了 许多 信息 。 


3. 软件 缺陷 的 原因 

软件 缺陷 的 产生 ,首先 是 不 可 避免 的 。 其 次 ,我 们 可 以 从 软件 本 身 ,团队 工作 和 技术 
问题 等 多 个 方面 分 析 , 将 比较 容易 确定 造成 软件 缺陷 的 原因 归纳 如 下 。 

(1) 技术 问题 

。 计算 和 精度 问题 。 

。 系统 结构 不 合理 ,造成 系统 性 能 问题 。 

。 接口 参数 不 匹配 出 现 问 题 。 

(2) 团队 工作 

。 系统 分 析 时 对 客户 的 需求 不 是 十 分 清楚 ,或 者 和 用 户 的 沟通 存在 一 些 困难 。 

。 不 同 阶段 的 开发 人 员 相 互 理解 不 一 致 ,软件 设计 对 需求 分 析 结 果 的 理解 偏差 , 编 
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程 人 员 对 系统 设计 规格 说 明 书 中 某 些 内 容重 视 不 够 ,或 存在 着 误解 。 

。 设 计 或 编程 上 的 一 些 假定 或 依赖 性 ,没有 得 到 充分 地 沟通 。 

(3) 软件 本 身 

“文档 错误 .内 容 不 正确 或 拼写 错误 。 

“数据 考虑 不 周全 引起 强度 或 负载 问题 。 

。 对 边界 考虑 不 够 周全 , 漏 掉 某 几 个 边界 条 件 造成 的 错误 。 

，。 对 一 些 实时 应 用 系统 ,保证 精确 的 时 间 同 步 ,否则 容易 引起 时 间 上 不 协调 、 不 一 致 

性 带 来 的 问题 。 

。 没 有 考虑 系统 骨 溃 后 在 系统 安全 性 可靠 性 的 隐患 。 

。 硬件 或 系统 软件 上 存在 的 错误 。 

”软件 开发 标准 或 过 程 上 的 错误 。 

4. 软件 缺陷 的 组 成 

我 们 知道 软件 缺陷 是 由 很 多 原因 造成 的 ,如 果 把 它们 按 需 求 分 析 结果 一 规格 说 明 
书 ,系统 设 计 结果 编程 的 代码 等 归 类 起 来 ,比较 后 发 人 
现 ,规格 说 明 书 是 软件 缺陷 出 现 最 多 的 地 方 , 如 15% 6% 
图 1-1 所 示 。 

软件 产品 规格 说 明 书 为 什么 是 软件 缺陷 存在 最 “系统 设计 
多 的 地 方 ,主要 原因 有 以 下 几 种 。 25% 

(1) 用 户 一 般 是 非 计算 机 专业 人 员 , 软 件 开发 人 人 
员 和 用 户 的 沟通 存在 较 大 困难 ,对 要 开发 的 产品 功能 | 
理解 不 一 致 图 1-1 软件 缺陷 构成 示意 图 

(2) 由 于 软件 产品 还 没有 设计 .开发 ,完全 靠 想 象 去 描述 系统 的 实现 结果 ,所 以 有 些 
特性 还 不 够 清晰 。 

(3) 需求 变化 的 不 一 致 性 。 用 户 的 需求 总 是 在 不 断 变化 的 ,这 些 变化 如 果 没 有 在 产 
品 规格 说 明 书 中 得 到 正确 的 描述 ,容易 引起 前 后 文 ,上 下 文 的 矛盾 。 

(4) 对 规格 说 明 书 不 够 重视 ,在 规格 说 明 书 的 设计 和 写作 上 投入 的 人 力 .时 间 不 足 。 

(5) 没有 在 整个 开发 队伍 中 进行 充分 沟通 ,有 时 只 有 设计 师 或 项 目 经 理 得 到 比较 多 
的 信息 。 

5. 软件 缺陷 的 修复 费用 

软件 不 仅仅 是 表面 上 的 那些 东西 一 -通常 要 靠 有 计划 \ 有 条 理 的 开发 过 程 来 实现 。 
从 开始 到 计划 ,编程 .测试 ,到 公开 使 用 的 过 程 中 ,都 有 可 能 发 现 软件 缺陷 。 

软件 缺陷 造成 的 修复 费用 呈 指 数 级 地 增长 一 一 也 就 是 说 , 随 着 时 间 的 推移 ,由 于 软件 
缺陷 造成 的 修复 费用 旦 十 倍 地 增长 。 当 早期 编写 产品 说 明 书 时 发 现 并 修复 缺陷 ,费用 只 
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要 1 美元 甚至 更 少 。 同 样 的 缺陷 如 果 直 到 软件 编写 完成 开始 测试 时 才 发 现 ,费用 可 能 要 
10 一 100 美元 。 如 果 是 客户 发 现 的 ,费用 可 能 达到 数 千 甚至 数 百 万 美元 。 

举 一 个 例子 来 说 明 ,比如 前 面 的 迪斯尼 狮子 王 实 例 。 问 题 的 根本 原因 是 软件 无 法 在 
流行 的 PC 平台 上 和 运行。 假如 早 在 编写 产品 说 明 书 时 ,有 人 已 经 研究 过 什么 PC 机 流行 ， 
并 且 明 确 指出 软件 需要 在 该 种 配置 上 设计 和 测试 ,付出 的 代价 小 得 几乎 可 以 忽略 不 计 。 
如 果 没 有 这 样 做 ,还 有 一 个 补救 措施 是 ,软件 测试 员 去 搜集 流行 PC 样机 并 在 其 上 验证 。 
他 们 可 能 会 发 现 软件 缺陷 ,但 是 修复 费用 要 高 得 多 ,因为 软件 必须 调试 .修改 .再 测试 。 开 
发 小 组 还 应 当 把 软件 的 初期 版 本 分 发 给 一 小 部 分 客户 进行 试用 这 叫 Beta 测试 。 那 些 被 
挑选 出 来 代表 庞大 市 场 的 客户 可 能 会 发 现 问题 。 然 而 实际 的 情况 是 ,缺陷 被 完全 忽视 , 直 
到 成 千 上 万 的 光盘 被 压制 和 销售 出 去 。 而 迪斯尼 公司 最 终 支 付 了 客户 投诉 电话 费 、 产 品 
召回 ,更换 光盘 ,以 及 又 一 轮 调试 .修改 和 测试 的 费用 。 如 果 严 重 的 软件 缺陷 到 了 客户 那 
里 ,就 足以 耗 尽 整个 产品 的 利润 。 

1.1.2 软件 测试 技术 的 发 展 历史 和 现状 


1. 软件 测试 技术 的 发 展 历史 

随 着 计算 机 的 诞生 一 一 在 软件 行业 发 展 初期 就 已 经 开始 实施 软件 测试 ,但 这 一 阶段 
还 没有 系统 意义 上 的 软件 测试 ,更 多 的 是 一 种 类 似 调试 的 测试 。 测 试 是 没有 计划 和 方法 
的 ,测试 用 例 的 设计 和 选取 也 都 是 根据 测试 人 员 的 经 验 随机 进行 的 ,大 多 数 测试 的 目的 是 
为 了 证 明 系统 可 以 正常 运行 。 

20 世纪 50 年 代 后 期 到 20 世纪 60 年 代 , 随 着 计算 机 软件 的 发 展 , 用 于 计算 机 编程 的 
各 种 高 级 语言 也 相继 诞生 ,测试 的 重点 也 逐步 转 入 到 使 用 高 级 语言 编写 的 软件 系统 中 来 ， 
但 程序 的 复杂 性 远 远 超 过 了 以 前 。 尽 管 如 此 ,由 于 受到 硬件 的 制约 ,在 计算 机 系统 中 , 软 
件 仍然 处 于 次 要 位 置 。 软 件 正确 性 的 把 握 仍然 主要 依赖 于 编程 人 员 的 技术 水 平 。 因 此 ， 
这 一 时 期 软件 测试 的 理论 和 方法 发 展 比较 缓慢 。 

20 世纪 70 年 代 以 后 , 随 着 计算 机 处 理 速度 的 提高 ,存储 器 容量 的 快速 增加 ,软件 在 
整个 计算 机 系统 中 的 地 位 变 得 越 来 越 重要 。 随 着 软件 开发 技术 的 成 熟 和 完善 ,软件 的 规 
模 也 越 来 越 大 ,复杂 度 也 大 大 增加 。 因 此 ,软件 的 可 靠 性 面临 着 前 所 未 有 的 危机 ,给 软件 
测试 工作 带 来 了 更 大 的 挑战 ,很 多 测试 理论 和 测试 方法 应 运 而 生 ,逐渐 形成 了 一 套 完 整 的 
体系 ,培养 和 造就 了 一 批 批 出 色 的 软件 测试 人 才 。 

如 今 在 软件 产业 化 发 展 的 大 趋势 下 ,人 们 对 软件 质量 、 成 本 和 进度 的 要 求 也 越 来 越 
高 ,软件 质量 的 控制 已 经 不 仅仅 是 传统 意义 上 的 软件 测试 。 传 统 软件 的 测试 大 多 是 基于 
代码 运行 的 ,并 且 常 常 是 软件 开发 的 后 期 才 开 始 进 行 ,但 大 量 研究 表明 ,设计 活动 引入 的 
错误 占 软 件 开发 过 程 中 出 现 的 所 有 错误 数量 的 50% 一 65%。 因 此 , 越 来 越 多 的 声音 呼 
吁 ,要求 有 一 个 规范 的 软件 开发 过 程 。 而 在 整个 软件 开发 过 程 中 ,测试 已 经 不 再 只 是 基于 
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程序 代码 进行 的 活动 ,而 是 一 个 基于 整个 软件 生命 周期 的 质量 控制 活动 ,贯穿 于 软件 开发 
的 各 个 阶段 。 


2. 软件 测试 的 现状 

在 我 国 ,软件 测试 可 能 算 不 上 一 个 真正 的 产业 ,软件 开发 企业 对 软件 测试 认识 淡薄 ， 
软件 测试 人 员 与 软件 开发 人 员 往 往 比 例 失 调 , 而 在 发 达 国 家 和 地 区 软件 测试 已 经 成 为 了 
一 个 产业 ,微软 的 开发 工程 师 与 测试 工程 师 的 比例 是 1 : 2, 国 内 一 般 公司 是 6: 1。 很 多 
人 认为 导致 这 种 现状 产生 的 原因 是 与 我 们 接受 的 传统 教育 和 开发 习惯 有 相当 大 的 关系 。 
软件 行业 相对 于 其 他 一 些 行业 来 说 是 相当 年 轻 的 ,开发 过 程 包含 了 需求 分 析 、 设 计 、 编 程 、 
测试 和 维护 等 工作 ,由 于 软件 业 的 历史 年 轻 , 而 且 一 般 人 认为 ,开发 周期 前 面 的 工作 没有 
完善 之 前 ,比较 难于 考虑 到 后 面 的 工作 。 因 此 ,我 们 可 以 看 到 软件 工作 大 部 分 的 精力 都 投 
入 在 了 需求 分 析 、 设 计 , 编 程 3 个 阶段 的 开发 ,造成 了 这 些 方面 方法 论 的 快速 发 展 ,而 忽视 
了 测试 工作 。 

总 之 ,与 一 些 发 达 国 家 相 比 ,国内 软件 测试 工作 还 存在 一 定 的 差距 。 主 要 体现 在 软件 
测试 意识 以 及 测试 理论 的 研究 ,大 型 测试 工具 软件 的 开发 以 及 从 业 人 员 数 量 等 方面 。 其 
实 , 这 与 中 国 整体 软件 的 发 展 水 平 是 一 致 的 ,因为 我 国 整体 的 软件 产业 水 平和 软件 发 达 国 
家 的 水 平 相 比 有 较 大 的 差距 ,而 作为 软件 产业 重要 一 环 的 软件 测试 ,必然 也 存在 着 不 小 的 
差距 。 但 是 ,我 们 在 软件 测试 实现 方面 并 不 比 国外 差 , 国 际 上 优秀 的 测试 工具 ,我 们 基本 
都 有 ,这 些 工 具 所 体现 的 思想 我 们 也 有 深刻 的 理解 ,很 多 大 型 系统 在 国内 都 得 到 了 很 好 的 
测试 。 


1.2 软件 测试 的 基本 理论 


软件 测试 在 软件 生命 周期 中 横 跨 两 个 阶段 。 通 常 在 编写 出 每 个 模块 之 后 就 对 它 进行 
必要 的 测试 ( 称 为 单元 测试 ) ,模块 的 编写 者 和 测试 者 是 同一 个 人 ,编码 和 单元 测试 属于 软 
件 生 命 周 期 的 同一 个 阶段 。 在 结束 这 个 阶段 之 后 ,对 软件 系统 还 要 进行 各 种 综合 测试 ,这 
是 软件 生命 周期 中 另 一 个 独立 的 阶段 ,通常 由 专门 的 测试 人 员 来 完成 这 项 工作 。 

目前 ,人 们 越 来 越 重视 软件 测试 ,软件 测试 的 工作 量 往往 占 到 软件 开发 总 工作 量 的 
40% 以 上 。 在 特殊 情况 下 ,测试 那些 重大 的 软件 ,例如 核反应 堆 监 控 软 件 ,其 测试 费用 可 
能 相当 于 软件 工程 其 他 步骤 总 成 本 的 三 倍 到 五 倍 。 因 此 ,我 们 必须 高 度 重视 软件 测试 工 
作 , 绝 不 能 认为 写 出 程序 代码 之 后 软件 开发 工作 就 完成 了 。 
1.2.1 软件 测试 的 定义 和 目标 


1. 软件 测试 的 定义 
人 们 对 于 软件 测试 的 目的 可 能 会 存在 着 这 样 的 认识 : 软件 测试 是 为 了 证 明 程序 是 正 
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确 的 。 实 际 上 ,这 种 认识 是 错误 的 。 因 为 如 果 表 明 程 序 是 正确 的 而 进行 测试 ,就 会 设计 一 
些 不 易 暴 露 错误 的 测试 方案 ,也 不 会 主动 去 检测 .排除 程序 中 可 能 存在 的 一 些 隐患 。 显 
然 , 这 样 的 测试 对 于 发 现 程序 中 的 错误 ,完善 和 提高 软件 的 质量 作用 不 大 。 因 为 程序 在 实 
际 运行 中 会 遇 到 各 种 各 样 的 实际 问题 ,而 这 些 问 题 可 能 是 我 们 在 设计 时 没有 考虑 到 的 ,所 
以 在 设计 测试 方案 时 ,就 应 该 尽量 让 它 能 发 现 程序 中 的 错误 ,从 而 在 软件 投入 运行 之 前 就 
将 这 些 错误 改正 ,最 终 把 一 个 高 质量 的 软件 系统 交 给 用 户 使 用 。 

通常 对 软件 测试 的 定义 有 如 下 描述 : 软件 测试 是 为 了 发 现 程 序 中 的 错误 而 执行 程序 
的 过 程 。 具 体 说 , 它 是 根据 软件 开发 各 阶段 的 规格 说 明和 程序 的 内 部 结构 而 精心 设计 出 
一 批 测试 用 例 ,并 利用 测试 用 例 来 运行 程序 ,以 发 现 程序 错误 的 过 程 。 
正确 认识 测试 的 目的 是 十 分 必要 的 ,只 有 这 样 , 才 能 设计 出 最 能 暴露 错误 的 测试 方 
案 。 此 外 ,应 该 认识 到 : 测试 只 能 证 明 程 序 中 错误 的 存在 ,但 不 能 证 明 程 序 中 没有 错误 。 
因为 即使 经 过 了 最 严格 的 测试 之 后 ,仍然 可 能 还 有 没 被 发 现 的 错误 存在 于 程序 中 ,所 以 说 
测试 只 能 查 出 程序 中 的 错误 ,但 不 能 证 明 程序 没有 错误 。 


2. 软件 测试 的 目标 

软件 测试 工作 是 非常 必要 的 ,测试 的 目的 就 在 于 在 软件 投入 运行 之 前 , 尽 可 能 多 地 发 
现 软 件 中 的 错误 。 软 件 测试 是 对 软件 规格 说 明 设计 和 编码 的 最 后 复审 ,是 软件 质量 保证 
的 关键 步骤 。 

实现 这 个 目的 关键 是 如 何 合理 地 设计 测试 用 例 ,在 设计 测试 用 例 时 ,要 着 重 考虑 那些 
易于 发 现 程序 错误 的 方法 策略 与 具体 数据 。 

综 上 所 述 ,软件 测试 的 目的 包括 以 下 三 点 : 

(1) 测试 是 程序 的 执行 过 程 , 目 的 在 于 发 现 错误 ,不 能 证 明 程 序 的 正确 性 , 仅 限于 处 
理 有 限 种 的 情况 。 

(2) 检查 系统 是 否 满足 需求 ,这 也 是 测试 的 期 望 目标 。 

(3) 一 个 好 的 测试 用 例 在 于 发 现 还 未 曾 发 现 的 错误 ; 成 功 的 测试 是 发 现 了 错误 的 
测试 。 
1.2.2 软件 测试 的 标准 

软件 测试 的 标准 是 站 在 用 户 的 角度 ,对 产品 进行 全 面 测试 ,尽早 ` 尽 可 能 多 地 发 现 缺 
陷 (bug) ,并 负责 跟踪 和 分 析 产 品 的 问题 ,对 不 足 之 处 提出 质疑 和 改进 意见 。 

软件 测试 标准 如 下 : 

(1) 软件 测试 的 目标 在 于 揭示 错误 。 测 试 人 员 要 始终 站 在 用 户 的 角度 去 看 问题 , 系 
统 中 最 严重 的 错误 的 是 那些 导致 程序 无 法 满足 用 户 需求 的 错误 。 

(2) 软件 测试 必须 基于 “质量 第 一 ”的 思想 去 开展 各 项 工作 。 

(3) 事先 定义 好 产品 的 质量 标准 。 只 有 建立 了 质量 标准 ,才能 根据 测试 的 结果 ,对 产 
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品 的 质量 进行 分 析 和 评估 。 

(4) 软件 项 目 一 启动 ,软件 测试 也 就 开始 了 ,而 不 是 等 程序 写 完 , 才 开 始 进行 测试 。 

(5) 测试 用 例 是 设计 出 来 的 ,不 是 写 出 来 的 ,所 以 要 根据 测试 的 目的 ,采用 相应 的 方 
法 去 设计 测试 用 例 , 从 而 提高 测试 的 效率 ,更 多 的 发 现 错误 ,提高 程序 的 可 靠 性 。 

(6) 对 发 现 错误 较 多 的 程序 段 ,应 进行 更 深入 的 测试 。 
1.2.3 软件 测试 的 原则 

各 种 统计 数据 显示 ,软件 开发 过 程 中 发 现 缺 陷 的 时 间 越 晚 ,修复 它 所 花费 的 成 本 就 越 
大 ,因此 在 需求 分 析 阶 段 就 应 当 有 测试 的 介入 。 因 为 软件 测试 的 对 象 不 仅仅 是 程序 编码 ， 
应 当 对 软件 开发 过 程 中 产生 的 所 有 产品 都 进行 测试 。 这 就 像 造 桥梁 一 样 , 在 图 纸 上 面 设 
计 好 桥梁 的 结构 之 后 ,我 们 只 有 对 图 纸 进 行 仔细 地 审查 后 ,才能 进行 施工 。 
人 们 普遍 存在 着 一 种 观念 ,认为 可 以 对 程序 进行 完全 的 测试 。 如 : 
。 许 多 管理 者 认为 存在 完全 测试 的 可 能 性 ,因此 要 求 员工 这 样 做 ,并 在 彼此 间 确 认 
正在 这 样 做 。 
。 某 些 软件 测试 公司 在 产品 销售 说 明 中 保证 他 们 能 对 软件 进行 完全 的 测试 。 
。 有 时 ,测试 覆盖 率 分 析 人 员 为 了 推销 自己 .也 宣称 自己 能 够 分 析 是 否 已 经 对 代码 
进行 了 完全 测试 ; 或 者 能 够 指出 下 一 步 还 需要 做 什么 测试 就 能 够 进行 完全 的 
测试 。 
。 许 多 销售 人 员 向 客户 强调 他 们 的 软件 产品 经 过 了 完全 的 测试 ,彻底 没有 错误 。 
。 一些 测试 人 员 也 相信 存在 着 完全 测试 的 秘诀 ,甚至 为 实现 这 种 想法 而 吃 尽 了 苦 
头 ,忍受 了 数 次 失败 和 挫折 。 但 实际 上 ,无 论 工作 得 多 么 辛苦 ,计划 得 多 么 周密 ， 
投入 的 时 间 多 长 ,人 力 和 物力 资源 多 大 ,仍然 无 法 做 到 充分 的 测试 ,仍然 会 遗漏 
缺陷 。 
对 一 个 程序 进行 完全 测试 就 意味 着 在 测试 结束 之 后 ,再 也 不 会 发 现 其 他 的 软件 错误 
了 。 其 实 , 这 是 不 可 能 的 ,充其量 是 测试 人 员 的 一 种 美好 的 愿望 而 已 。 

除了 测试 人 员 之 外 ,程序 员 在 编写 完 每 段 编码 之 后 ,或 者 在 每 个 子 模块 完成 后 ,都 要 
进行 认真 测试 ,这 样 就 可 以 在 最 早 的 时 间 发 现 一 些 潜在 的 问题 并 加 以 解决 。 之 所 以 这 样 
做 ,是 由 于 在 测试 过 程 中 我 们 要 避免 一 些 人 为 的 和 主观 因素 的 干扰 。 我 们 知道 ,开发 和 测 
试 是 互 为 相反 的 行为 过 程 ,两 者 有 着 本 质 的 不 同 。 在 程序 员 完成 大 量 的 设计 和 编码 之 后 ， 
让 他 否定 自己 所 做 的 工作 ,是 非常 不 易 的 ,可 以 说 很 少 有 人 能 有 这 样 的 心态 。 另 外 一 个 原 
因 就 是 系统 需求 的 错误 不 易 被 发 现 ,如 果 程序 员 检查 自己 的 代码 ,那么 他 对 系统 需求 的 理 
解 缺 乏 客观 性 ,往往 存在 着 对 问题 叙述 或 说 明 的 误解 ,不 难 想象 带 有 错误 认识 的 程序 员 是 
很 难 发 现 自己 程序 存在 的 问题 的 。 

软件 测试 的 本 质 就 是 针对 要 测试 的 内 容 确定 一 组 测试 用 例 。 测 试用 例 至 少 应 当 包括 
如 下 几 个 基本 信息 : 
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。 在 执行 测试 用 例 之 前 ,应 满足 的 前 提 条 件 ; 

。 输入 的 数据 (合理 的 、 不 合理 的 ); 

。 预期 的 输出 (包括 后 果 和 实际 输出 ) 。 

有 经 验 的 测试 人 员 会 发 现 ,在 进行 软件 测试 的 过 程 中 , 常 发 生 软件 缺陷 “扎堆 ”的 现 
象 ,因此 当 我 们 在 某 一 部 分 发 现 了 很 多 错误 时 ,应 当 进 一 步 仔 细 测 试 是 否 还 包含 了 更 多 的 
软件 缺陷 。 

软件 缺陷 “扎堆 ”的 现象 常见 形式 有 : 

。 对 话 框 的 某 个 控件 功能 不 起 作用 ,可 能 其 他 控件 的 功能 也 不 起 作用 。 

。 某 个 文本 框 不 能 正确 显示 双 字 节 字 符 , 则 其 他 文本 框 也 可 能 不 支持 双 字 节 字 符 。 

。 联机 帮助 某 段 文字 的 翻译 包含 了 很 多 错误 ,与 其 相 邻 的 上 下 段 的 文字 可 能 也 包含 

很 多 的 语言 质量 问题 。 
。 安装 文件 某 个 对 话 框 的 "上 一 步 "或 “下 一 步 ? 按 钮 被 截断 , 则 这 两 个 按钮 在 其 他 对 
话 框 中 也 可 能 被 截断 。 

良好 的 开始 是 成 功 的 一 半 。 合 理 的 测试 计划 有 助 于 测试 工作 顺利 有 序 地 进行 ,因此 
要 求 在 对 软件 进行 测试 之 前 所 做 的 测试 计划 中 ,应 该 结合 多 种 针对 性 强 的 测试 方法 , 列 出 
所 有 可 使 用 资源 ,建立 一 个 正确 的 测试 目标 ,本 着 严谨 .准确 的 原则 ,周密 细致 地 做 好 测试 
前 期 的 准备 工作 ,避免 测试 的 随意 性 。 尤 其 是 要 尽量 科学 合理 地 安排 测试 时 间 ,并 留 出 一 
定 的 机 动 时 间 ,防止 意外 情况 的 发 生 , 以 免 出 现 测试 时 间 不 够 用 ,甚至 使 很 多 测试 工作 不 
能 正常 进行 的 情况 ,尽量 降低 测试 风险 。 

软件 测试 的 目标 是 想 以 最 少 的 时 间 和 人 力 找 出 软件 中 潜在 的 各 种 错误 和 缺陷 。 如 果 
成 功 地 实施 了 测试 ,就 能 够 发 现 软件 中 的 错误 。 

根据 这 样 的 测试 目的 ,软件 测试 的 原则 应 该 是 : 

(1) 应 当 把 “尽早 地 和 不 断 地 进行 软件 测试 "作为 软件 开发 者 的 座右铭 。 坚 持 在 软件 
开发 的 各 个 阶段 的 技术 评审 ,这 样 才能 在 开发 过 程 中 尽早 发 现 和 预防 错误 ,把 出 现 的 错误 
克服 在 早期 ,杜绝 某 些 隐患 ,提高 软件 质量 。 

(2) 测试 用 例 应 由 测试 输入 数据 和 与 之 对 应 的 预期 输出 结果 这 两 部 分 组 成 。 如 果 对 
测试 输入 数据 没有 给 出 预期 的 程序 输出 结果 ,那么 就 缺少 了 检验 实测 结果 的 基准 ,就 有 可 
能 把 一 个 似是而非 的 错误 结果 当成 正确 结果 。 

(3) 程序 员 应 避免 检查 自己 的 程序 。 如 果 由 别人 来 测试 程序 员 编 写 的 程序 ,可 能 会 
更 客观 .更 有 效 、 更 容易 取得 成 功 。 

(4) 在 设计 测试 用 例 时 ,应当 包 括 合理 的 输入 条 件 和 不 合理 的 输入 条 件 。 

合理 的 输入 条 件 是 指 能 验证 程序 正确 的 输入 条 件 ,而 不 合理 的 输入 条 件 是 指 异 常 的 、 
临界 的 、 可 能 引起 问题 变异 的 输入 条 件 。 因 此 ,软件 系统 处 理 非法 命令 的 能 力也 必须 在 测 
试 时 受到 检验 。 用 不 合理 的 输入 条 件 测试 程序 时 ,往往 比 用 合理 的 输入 条 件 进行 测试 能 
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发 现 更 多 的 错误 。 

(5) 充分 注意 测试 中 的 群集 现象 。 测 试 时 不 要 以 为 找到 了 几 个 错误 问题 就 已 解决 ， 
不 需要 继续 测试 了 。 应 当 对 错误 群集 的 程序 段 进 行 重点 测试 ,以 提高 测试 投资 的 效益 。 

(6) 严格 执行 测试 计划 ,排除 测试 的 随意 性 。 对 于 测试 计划 ,要 明确 规定 ,不 要 随意 
解释 。 

(7) 应 当 对 每 一 个 测试 结果 做 全 面 检查 。 这 是 一 条 最 明显 的 原则 ,但 常常 被 忽视 。 
必须 对 预期 的 输出 结果 明确 定义 ,对 实测 的 结果 仔细 分 析 检 查 , 抓 住 关 键 ,暴露 错误 。 

(8) 妥善 保存 测试 计划 ` 测 试用 例 .出 错 统计 和 最 终 分 析 报 告 ,为 维护 提供 方便 。 
1.2.4 软件 测试 的 分 类 

从 不 同 的 角度 ,可 以 把 软件 测试 技术 分 成 不 同 种 类 。 


1. 从 是 否 需要 执行 被 测 软件 的 角度 分 类 

从 是 否 需要 执行 被 测 软件 的 角度 ,软件 测试 可 分 为 静态 测试 (Static Testing) 和 动态 
测试 (Dynamic Testing)。 顾 名 思 义 ,静态 测试 就 是 通过 对 被 测 程序 的 静态 审查 ,发 现代 
码 中 潜在 的 错误 。 它 一 般 用 人 工 方 式 脱 机 完成 , 故 亦 称 人 工 测试 或 代码 评审 (Code 
Review); 也 可 借助 于 静态 分 析 器 在 机 器 上 以 自动 方式 进行 检查 ,但 不 要 求 程序 本 身 在 机 
器 上 和 运行。 按照 评审 的 不 同 组 织 形式 ,代码 评审 又 可 分 为 代码 会 审 . 走 查办 公 桌 检查 、 同 
行 评 分 4 种。 对 某 个 具体 的 程序 ,通常 只 使 用 一 种 评审 方式 。 

动态 测试 的 对 象 必须 是 能 够 由 计算 机 真正 运行 的 被 测试 的 程序 。 它 分 为 黑 盒 测试 和 
白 盒 测试 ,在 第 3 章 、 第 4 章 中 将 会 详细 介绍 。 

2. 从 软件 测试 用 例 设计 方法 的 角度 分 类 

从 软件 测试 用 例 设 计 方 法 的 角度 ,可 分 为 黑 盒 测试 (Black-Box Testing) 和 白 盒 测试 
(White-Box Testing) 。 

黑 盒 测 试 是 一 种 从 用 户 角度 出 发 的 测试 ,又 称 为 功能 测试 .数据 驱动 测试 和 基于 规格 
说 明 的 测试 。 使 用 这 种 方法 进行 测试 时 ,把 被 测试 程序 当 作 一 个 黑 盒 , 忽 略 程序 内 部 的 结 
构 的 特性 ,测试 者 在 只 知道 该 程序 输入 和 输出 之 间 的 关系 或 程序 功能 的 情况 下 ,依靠 能 够 
反映 这 一 关系 和 程序 功能 需求 规格 的 说 明 书 ,来 确定 测试 用 例 和 推断 测试 结果 的 正确 性 。 
简单 地 说 , 若 测 试用 例 的 设计 是 基于 产品 的 功能 ,目的 是 检查 程序 各 个 功能 是 否 实现 ,并 
检查 其 中 的 功能 错误 , 则 这 种 测试 方法 称 为 黑 盒 。 

白 盒 测 试 基于 产品 的 内 部 结构 来 进行 测试 ,检查 内 部 操作 是 否 按 规 定 执行 ,软件 各 个 
部 分 功能 是 否 得 到 充分 利用 。 白 盒 测 试 又 称 为 结构 测试 .逻辑 驱动 测试 或 基于 程序 的 测 
试 。 即 根据 被 测 程序 的 内 部 结构 设计 测试 用 例 ,测试 者 需要 事先 了 解 被 测试 程序 的 结构 。 


3, 从 软件 测试 的 策略 和 过 程 的 角度 分 类 
按照 软件 测试 的 策略 和 过 程 分 类 ,软件 测试 可 分 为 单元 测试 (Unit Testing) 、 集 成 测 
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试 (Integration Testing) ,确认 测试 (Validation Testing)、 系统 测试 (System Testing) 和 验 
收 测试 (Verification Testing) 。 

单元 测试 是 针对 每 个 单元 的 测试 ,是 软件 测试 的 最 小 单位 。 它 确保 每 个 模块 能 正常 
工作 。 单 元 测试 多 数 使 用 白 盒 测试 ,用 以 发 现 内 部 错误 。 

集成 测试 是 对 已 测试 过 的 模块 进行 组 装 ,进行 集成 测试 的 目的 主要 在 于 检验 与 软件 
设计 相关 的 程序 结构 问题 。 集 成 测试 一 般 通 过 黑 盒 测 试 方法 来 完成 。 

确认 测试 是 检验 所 开发 的 软件 能 否 满足 所 有 功能 和 性 能 需求 的 最 后 手段 ,通常 采用 
黑 盒 测 试 方法 。 

系统 测试 的 主要 任务 是 检测 被 测 软件 与 系统 的 其 他 部 分 的 协调 性 。 

验收 测试 是 软件 产品 质量 的 最 后 一 关 。 这 一 环节 ,测试 主要 从 用 户 的 角度 着 手 ,其 参 
与 者 主要 是 用 户 和 少量 的 程序 开发 人 员 。 


1.3 软件 测试 与 软件 开发 


1. 软件 测试 与 软件 开发 各 阶段 的 关系 

软件 开发 过 程 是 一 个 自 项 向 下 、 逐 步 细 化 的 过 程 ,首先 在 软件 计划 阶段 定义 了 软件 的 
作用 域 ,然后 进行 软件 需求 分 析 , 建 立 软 件 的 数据 域 .功能 和 性 能 需求 .约束 和 一 些 有 效 性 
准则 。 接 着 进入 软件 开发 ,首先 是 软件 设计 ,然后 再 把 设计 用 某 种 程序 设计 语言 转换 成 程 
序 代 码 。 而 测试 过 程 则 是 依 相 反 的 顺序 安排 的 自 底 向 上 ,逐步 集成 的 过 程 , 低 一 级 测试 为 
上 一 级 测试 准备 条 件 。 此 外 还 有 两 者 平行 地 进行 测试 。 

如 图 1-2 所 示 是 软件 测试 与 软件 开发 过 程 的 关系 图 。 首 先 对 每 一 个 程序 模块 进行 单 
元 测试 ,消除 程序 模块 内 部 在 逻辑 上 和 功能 上 的 错误 和 缺陷 。 再 对 照 软件 设计 进行 集成 
测试 ,检测 和 排除 子 系统 (或 系统 ) 结 构 上 的 错误 。 随 后 再 对 照 需求 ,进行 确认 测试 。 最 后 
从 系统 全 体 出 发 ,运行 系统 ,看 是 否 满足 要 求 。 


| 需求 分 析 | | 概要 设计 | 。 。[ 评 细 设 计 | | 源 程序 | | 单元 | 。| 条 成 | | 确认 | 。 
说 明 书 说 明 书 | 说 明 书 代码 测试 ”| 测试 ”| 测试 


图 1-2 软件 测试 与 软件 开发 过 程 的 关系 


2. 测试 与 开发 的 并 行 性 
在 软件 的 需求 得 到 确认 并 通过 评审 后 ,概要 设计 工作 和 测试 计划 制定 设计 工作 就 要 
并 行进 行 。 如 果 系 统 模块 已 经 建立 ,对 各 个 模块 的 详细 设计 、 编 码 ,单元 测试 等 工作 又 可 
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并 行 。 待 每 个 模块 完成 后 ,可 以 进行 集成 测试 、 系 统 测试 。 软 件 测试 与 软件 开发 并 行 流程 
如 图 1-3 所 示 。 

详细 设计 编码 单元 测试 
设计 走 查 | 编码 走 查 


集成 测试 


需求 评审 概要 设计 评审 
2 


* 项 目 阶 段 任务 的 里 程 碑 
测试 计划 测试 过 程 测试 评审 
图 1-3 软件 测试 与 软件 开发 的 并 行 性 


3. 测试 与 开发 模型 

软件 测试 不 仅仅 是 执行 测试 ,而 且 是 一 个 包含 很 多 复杂 活动 的 过 程 , 并 且 这 些 过 程 应 
该 贯穿 于 整个 软件 的 开发 过 程 。 在 软件 开发 过 程 中 ,应 该 什么 时 候 进 行 测试 ,如 何 更 好 地 
把 软件 开发 和 测试 活动 集成 到 一 起 ? 其实 这 也 是 软件 测试 工作 人 员 必 须 考虑 的 问题 , 因 
为 只 有 这 样 ,才能 提高 软件 测试 工作 的 效率 ,提高 软件 产品 的 质量 ,最 大 限度 地 降低 软件 
开发 与 测试 的 成 本 ,减少 重复 劳动 。 如 图 1-4 所 示 , 即 为 软件 测试 与 开发 的 完整 流程 。 


项 目 规划 产品 发 布 
项 目 需求 分 析 测试 需求 分 析 
系统 测试 
系统 测试 计划 上 :| iA 
项 目 概要 分 析 集成 测试 
一 一 一 一 [集成 测试 计划 | 二 | I 
项 目 详细 分 析 
一 一 | 单元 测试 计划 |- [ 单元 测试 


| “-[ 疝 RS 


图 1-4 完整 的 软件 开发 和 测试 流程 
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小 结 


本 章 从 软件 缺陷 实例 为 出 发 点 介绍 了 软件 测试 背景 和 测试 发 展 的 历程 ,以 及 它 在 国 
内 的 发 展 状 况 。 随 着 软件 开发 过 程 和 开发 技术 的 不 断 改进 ,软件 测试 理论 和 方法 也 在 不 
断 完善 ,测试 工具 也 在 莲 勃 发 展 。 软 件 测 试 是 软件 质量 保证 的 手段 ,本 章 讲述 了 软件 测试 
的 定义 ,明确 了 软件 测试 的 目标 就 是 以 最 少 的 时 间 和 人 力 找 出 软件 中 潜在 的 各 种 错误 和 
缺陷 ,阐述 了 软件 测试 执行 的 标准 和 软件 测试 的 原则 。 从 不 同 角度 ,对 软件 测试 进行 了 分 
类 : 从 是 否 需要 执行 被 测 软件 的 角度 可 分 为 静态 测试 和 动态 测试 ; 从 软件 测试 用 例 设计 
方法 的 角度 可 分 为 黑 盒 测试 和 白 盒 测试 ; 从 软件 测试 的 策略 和 过 程 的 角度 又 可 分 为 单元 
测试 .集成 测试 .确认 测试 .系统 测试 ,验收 测试 。 最 后 介绍 了 软件 开发 与 软件 测试 的 相 畏 
相 成 的 关系 。 


习 题 


1. 名 词 解释 : 
软件 缺陷 、 软 件 测试 、 静 态 测试 、 动 态 测试 、 黑 盒 测 试 、 白 盒 测试 、 单 元 测试 集成 
测试 。 
. 简 述 软件 测试 发 展 的 历史 及 软件 测试 的 现状 。 
. 谈 谈 你 对 软件 测试 的 重要 性 的 理解 。 
. 简 述 软件 测试 的 目标 及 标准 。 
. 简 述 软件 测试 的 原则 。 
. 简 述 软件 测试 与 软件 开发 的 关系 。 


wh 
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本 章 概述 

软件 产品 种 类 繁多 ,测试 过 程 干 变 万 化 ,为 了 能 够 找到 系统 中 绝 大 部 分 的 软件 缺陷 ， 
必须 构建 各 种 行 之 有 效 的 测试 方法 与 策略 。 

本 章 通过 详细 分 析 , 介 绍 了 软件 测试 的 复杂 性 和 经 济 性 ; 通过 讲述 软件 测试 的 整个 
流程 ,从 而 了 解 单元 测试 .集成 测试 .确认 测试 .系统 测试 和 验收 测试 等 基本 测试 方法 ; 通 
过 比较 分 析 , 介 绍 了 静态 与 动态 测试 . 黑 盒 与 白 盒 测试 的 基本 策略 。 


2.1 软件 测试 的 复杂 性 与 经 济 性 分 析 


人 们 在 对 软件 工程 开发 的 常规 认识 中 ,认为 开发 程序 是 一 个 复杂 而 困难 的 过 程 ,需要 
花费 大 量 的 人 力 、 物 力 和 时 间 ,而 测试 一 个 程序 则 比较 容易 ,不 需要 花费 太 多 的 精力 。 这 
其 实 是 人 们 对 软件 工程 开发 过 程 理解 上 的 一 个 误区 。 在 实际 的 软件 开发 过 程 中 ,作为 现 
代 软 件 开发 工业 一 个 非常 重要 的 组 成 部 分 ,软件 测试 正 扮演 着 越 来 越 重 要 的 角色 。 随 着 
软件 规模 的 不 断 扩 大 ,如 何在 有 限 的 条 件 下 对 被 开发 软件 进行 有 效 的 测试 正成 为 软件 工 
程 中 一 个 非常 关键 的 课题 。 

2.1.1 软件 测试 的 复杂 性 

设计 测试 用 例 是 一 项 细致 并 且 需 要 具备 高 度 技 巧 的 工作 , 稍 有 不 慎 就 会 顾此失彼 ,发 
E 不 应 有 的 玖 漏 。 下 面 分 析 了 容易 出 现 问题 的 根源 。 

(1) 完全 测试 是 不 现实 的 

在 实际 的 软件 测试 工作 中 ,由 于 软件 测试 情况 数量 极其 巨大 ,不 论 采用 什么 方法 ,都 
不 可 能 进行 完全 彻底 的 测试 。 所 谓 彻底 测试 ,就 是 让 被 测 程序 在 一 切 可 能 的 输入 情况 下 
全 部 执行 一 遍 。 通 常 也 称 这 种 测试 为 “ 穷 举 测试 ”。 
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穷 举 测 试 会 引起 以 下 几 种 问题 : 

。 输 入 量 太 大 ; 

。 输出 结果 太 多 ; 

。 软件 执行 路 径 太 多 ; 

。 说 明 书 存在 主观 性 。 

由 于 以 上 问题 的 存在 ,使 得 在 大 多 数 的 软件 测试 过 程 中 , 穷 举 测试 几乎 是 不 可 能 的 。 
在 软件 的 使 用 过 程 中 ,人 们 不 仅 要 进行 合法 的 输入 , 若 出 现 某 些 意外 情况 ,可 能 还 要 发 生 
种 种 不 合法 的 输入 。 这 样 的 测试 情况 可 能 出 现 无 穷 多 个 ,所 以 测试 人 员 既 要 测试 所 有 合 
法 的 输入 ,还 要 对 那些 不 合法 但 是 可 能 的 输入 进行 测试 。 

例如 ,对 于 常用 的 画图 板 程序 ,如 果 测 试 人 员 受 命 于 使 用 穷 举 测试 来 进行 ,那么 首先 
要 对 直线 的 画图 进行 测试 ,把 直线 中 最 小 的 两 个 相 邻 点 ,一 个 一 个 地 延长 直至 最 大 的 点 ; 
然后 是 考虑 反方 向 的 画图 , 青 是 斜 线 的 画图 。 将 所 有 可 能 的 直线 画图 全 部 测试 完成 之 后 ， 
还 要 考虑 其 他 图 像 的 各 种 画 法 ,一 个 一 个 地 在 理论 上 将 所 有 可 能 发 生 的 情况 全 部 测试 完 
毕 后 ,再 将 可 能 出 现 的 不 同 图 形 的 玛 加 全 部 实现 ,当然 这 里 还 不 包括 色彩 的 运用 。 按 照 上 
述 思路 一 个 一 个 的 测试 , 单 是 合法 输入 就 接近 无 穷 多 个 ,使 得 在 理论 上 根本 无 法 进行 穷 举 
测试 。 在 实际 的 使 用 过 程 中 ,测试 人 员 还 要 考虑 到 包括 随机 出 现 的 各 种 突 发 情况 ,比如 用 
户 不 小 心 撞 到 键盘 引起 某 个 误 操 作 。 经 典 著 作 《( 软 件 测试 技巧 ) 的 作者 G.J. Myers 在 
1979 年 描述 了 一 个 只 包含 loop 循环 和 if 语句 的 简单 程序 。 可 以 使 用 不 同 的 语言 将 其 写 
成 20 行 左右 的 代码 ,但 是 这 样 简短 的 语句 却 有 着 十 万 亿 条 路 径 。 面 对 这 样 一 个 庞大 的 数 
字 ,即便 是 一 个 有 经 验 的 优秀 的 软件 测试 员 也 需要 十 亿 年 才能 完成 全 部 测试 ,而 且 在 实际 
应 用 中 ,此 类 程序 是 非常 有 可 能 出 现 的 。 

E. W. Dijkstra 的 一 句 名 言 对 测试 的 不 彻底 性 作 了 很 好 的 注解 :“ 程 序 测试 只 能 证 明 
错误 的 存在 ,但 不 能 证 明 错 误 的 不 存在 ”。 由 于 穷 举 测试 工作 量 太 大 ,实践 上 行 不 通 , 这 就 
注定 了 一 切实 际 测试 都 是 不 彻底 的 ,也 就 不 能 够 保证 被 测试 程序 在 理论 上 不 存在 遗留 的 
错误 。 

(2) 软件 测试 是 有 风险 的 

穷 举 测试 的 不 可 行 性 使 得 大 多 数 软 件 在 进行 测试 的 时 候 只 能 采取 非 穷 举 测试 ,这 又 
意味 着 一 种 冒险 。 比 如 在 使 用 Microsoft Office 工具 中 的 Word 时 ,可 以 作 这 样 的 一 个 测 
试 : 新 建 一 个 Word 文档 ; @ 在 文档 中 输入 汉字 “ 胡 ”; @@ 设 置 其 字体 属性 为 “隶书 ”, 字 
号 为 初 号 ,效果 为 “空心 ”; @@ 将 页 面 的 显示 比例 设 为 “500%”。 这 时 在 “ 胡 ” 字 的 内 部 会 出 
现 “ 胡 万 进 印 ”4 个 字 。 类 似 问题 在 实际 测试 中 如 果 不 使 用 穷 举 测试 是 很 难 发 现 的 ,而 如 
果 在 软件 投入 市 场 时 才 发 现 则 修复 代价 就 会 非常 高 。 这 就 会 产生 一 个 矛盾 : 软件 测试 员 
不 能 做 到 完全 的 测试 ,不 完全 测试 又 不 能 证 明 软 件 的 百分之百 的 可 靠 。 那 么 如 何在 这 两 
者 的 矛盾 中 找到 一 个 相对 的 平衡 点 呢 ? 
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从 如 图 2-1 所 示 的 最 优 测试 量 示意 图 可 以 观察 到 , 当 软 件 缺 陷 降 低 到 某 一 数值 后 , 随 
着 测试 量 的 不 断 上 升 软件 缺陷 并 没有 明显 地 下 降 。 这 是 软件 测试 工作 中 需要 注意 的 重要 
问题 。 如 何 把 测试 数据 量 巨大 的 软件 测试 减少 到 可 以 控制 的 范围 ,如 何 针 对 风险 做 出 最 
明智 的 选择 是 软件 测试 人 员 必 须 把 握 的 关键 问题 。 
数 
量 


测试 成 本 


0 测试 量 
图 2-1 最 优 测试 量 示 意图 


图 2-1 的 最 优 测试 量 示意 图 说 明了 发 现 软件 缺陷 数量 和 测试 量 之 间 的 关系 , 随 着 测 
试 量 的 增加 ,测试 成 本 将 呈 几 何 数 级 上 升 ,而 软件 缺陷 降低 到 某 一 数值 之 后 将 没有 明显 的 
变化 ,最 优 测量 值 就 是 这 两 条 曲线 的 交点 。 

对 于 软件 测试 数据 量 巨大 的 问题 没有 十 全 十 美的 解决 办 法 ,采取 最 优 测试 量 只 是 在 
两 者 中 的 一 种 妥协 。 然 而 糟糕 的 是 矛盾 还 不 止 于 此 ,测试 量 会 随 着 时 间 的 推移 而 发 生 改 
变 。 在 当今 竞争 激烈 的 市 场 里 ,争取 时 间 可 能 是 制胜 的 关键 ,这 本 身 就 使 软件 的 开发 与 测 
试 出 现 矛 盾 。 使 情况 更 加 复杂 的 是 , 当 一 种 新 的 技术 或 者 新 的 标准 出 现时 ,可 能 人 们 会 对 
软件 是 否 十 全 十 美 并 不 在 意 了 。 在 这 种 情况 下 ,要 进行 多 长 时 间 的 测试 就 更 是 一 个 值得 
商 椎 的 问题 。 

微软 公司 在 研制 Windows 操作 系统 的 第 一 个 版 本 时 已 经 落后 于 对 手 了 。 但 是 为 了 
能 抢 得 第 一 部 应 用 于 PC 机 的 图 形 界面 操作 系统 这 一 市 场 先 机 ,微软 公司 一 面 大 做 广告 
宣传 ,一 面 在 公司 里 加 班 加 点 。 为 了 能 尽快 进行 产品 的 发 布 , 在 没有 进行 可 靠 的 测试 验证 
的 情况 下 ,微软 公司 就 公布 了 自己 的 Windows 操作 系统 。 虽 然 这 时 的 Windows 操作 系 
统 漏洞 百出 ,但 是 仍然 赢得 了 绝 大 部 分 的 市 场 份额 。 反 观 微 软 公司 的 竞争 对 手 , 虽 然 对 产 
品 进行 了 完善 的 测试 与 验证 ,但 这 时 候 已 经 没有 人 来 关注 他 们 的 产品 了 ,大 家 都 在 兴致 勃 
勃 地 讨论 着 Windows 操作 系统 ,竞争 公司 最 终 退 出 了 这 一 市 场 。 

当然 ,上 面 的 例子 只 是 在 市 场 初期 的 特殊 现象 。 如 果 市 场 分 配 格 局 已 经 建立 起 来 , 那 
么 就 应 该 针对 合适 的 目标 加 大 测试 量 ,提高 产品 质量 。 但 是 在 不 同 的 市 场 时 期 如 何 决定 
测试 量 的 多 少 对 于 一 个 软件 开发 公司 仍然 是 一 个 十 分 重要 的 课题 ,这 不 仅 涉及 软件 技术 
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知识 ,还 要 考虑 潜在 用 户 的 心理 感受 因素 和 商品 运营 规律 因素 。 
(3) 杀 虫 剂 现象 
1990 年 ,Boris Beizer 在 其 编著 的 《Software Testing Techniques》( 第 二 版 ) 中 提 到 了 
“ 杀 虫 剂 怪事 ”一 词 ,同一 种 测试 工具 或 方法 用 于 测试 同一 类 软件 越 多 , 则 被 测试 软件 对 测 
试 的 免疫 力 就 越 强 。 这 与 农药 杀 虫 是 一 样 的 , 老 用 一 种 农药 , 则 害虫 就 有 了 免疫 力 ,农药 
就 失去 了 作用 。 
由 于 软件 开发 人 员 在 开发 过 程 中 可 能 碰见 各 种 各 样 的 主客 观 因素 ,再 加 上 不 可 预见 
的 突 发 性 事件 ,所 以 再 优秀 的 软件 测试 员 采 用 一 种 测试 方法 或 者 工具 也 不 可 能 检测 出 所 
有 的 缺陷 。 为 了 克服 被 测试 软件 的 免疫 力 , 软 件 测试 员 必 须 不 断 编写 新 的 测试 程序 ,对 程 
序 的 各 个 部 分 进行 不 断 地 测试 ,以 避免 被 测试 软件 对 单一 的 测试 程序 具有 免疫 力 而 使 软 
件 缺陷 不 被 发 现 。 这 就 对 软件 测试 人 员 的 素质 提出 了 很 高 的 要 求 。 
(4) 缺陷 的 不 确定 性 
在 软件 测试 中 还 有 一 个 让 人 不 容易 判断 的 现象 是 缺陷 的 不 确定 性 , 即 并 不 是 所 有 的 
软件 缺陷 都 需要 被 修复 。 对 于 究竟 什么 才 算是 软件 缺陷 是 一 个 很 难 把 握 的 标准 ,在 任何 
一 本 软件 测试 的 书 中 都 只 能 给 出 一 个 笼统 的 定义 。 实 际 测 试 中 需要 把 这 一 定义 根据 具体 
的 被 测 对 象 明 确 化 。 即 使 这 样 , 具 体 的 测试 人 员 对 软件 系统 的 理解 不 同 , 还 是 会 出 现 不 同 
的 标准 。 
当 确定 是 软件 缺陷 时 , 若 出 现 以 下 情况 ,软件 缺陷 就 不 能 被 修复 。 
。 修复 的 风险 太 大 。 软 件 在 编译 期 间 , 本 身 是 一 个 很 脆弱 的 系统 ,由 于 在 整个 软件 
系统 中 各 个 模块 之 间 有 着 千 丝 万 缕 的 联系 ,使 得 单一 修复 某 一 段 代码 可 能 会 引起 
大 量 的 未 知 的 缺陷 ,所 以 在 某 些 非常 时 期 不 修复 反而 是 最 保险 的 做 法 。 
。 时 间 不 够 。 在 商业 社会 中 , 当 部 分 软件 缺陷 没有 足够 的 时 间 修 复 , 就 只 能 在 说 明 
书 中 列 出 可 能 出 现 的 缺陷 。 
。 不 会 引起 大 的 问题 。 为 了 防止 整个 系统 由 于 局 部 修复 而 出 现 某 些 问题 ,在 特殊 情 
况 下 ,不 常 出 现 的 小 问题 可 以 暂时 忽略 。 
。 可 以 理解 成 新 的 功能 。 某 些 特殊 的 缺陷 有 时 从 男 一 个 方面 看 可 以 理解 成 一 种 新 
的 功能 ,这 是 大 多 数 商 务 软件 在 处 理 一 些 特 殊 缺 陷 时 采取 的 做 法 。 
2.1.2 软件 测试 的 经 济 性 
软件 测试 的 经 济 性 有 两 方面 体现 : 一 是 体现 在 测试 工作 在 整个 项 目 开发 过 程 中 的 
重要 地 位 ,二 是 体现 在 应 该 按照 什么 样 的 原则 进行 测试 ,以 实现 测试 成 本 与 测试 效果 
的 统一 。 软 件 工程 的 总 目标 是 充分 利用 有 限 的 人 力 和 物力 资源 ,高 效率 、 高 质量 地 完 
成 测试 。 结 合 2. 1. 1 小 节 关 于 穷 举 测试 具有 不 可 行 性 ,就 可 以 理解 为 什么 要 在 测试 量 
与 测试 成 本 的 曲线 中 选取 最 优 测试 点 。 为 了 降低 测试 成 本 ,在 选择 测试 用 例 时 要 遵守 
以 下 原则 : 
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。 被 测 对 象 的 测试 等 级 应 该 取决 于 被 测 对 象 在 整个 软件 开发 项 目 中 的 重要 地 位 和 
一 旦 发 生 故 障 会 造成 的 损失 情况 来 综合 分 析 。 
。 要 制定 科学 有 效 的 测试 策略 。 在 保证 能 够 尽 可 能 多 地 发 现 软 件 缺 陷 的 前 提 下 , 尽 
量 少 地 使 用 测试 用 例 。 如 何 找 到 最 优 测试 点 ,掌握 好 测试 用 量 是 至 关 重 要 的 。 一 
位 有 经 验 的 软件 管理 人 员 在 谈 到 软件 测试 时 曾 这 样 说 过 :“ 不 充分 的 测试 是 思春 
的 ,而 过 度 的 测试 是 一 种 罪 艺 ”。 测 试 不 足 意 味 着 让 用 户 承担 隐藏 错误 带 来 的 危 
险 ,过 度 测试 则 会 浪费 许多 宝贵 的 资源 。 
测试 是 软件 生命 期 中 费用 消耗 最 大 的 环节 。 测 试 费用 除了 测试 的 直接 消耗 外 ,还 包 
括 其 他 的 相关 费用 。 影 响 测试 费用 的 主要 因素 有 : 
(1) 软件 面向 的 目标 用 户 
软件 产品 需要 达到 的 标准 决定 了 测试 的 数量 。 对 于 那些 至 关 重 要 的 系统 必须 进行 更 
多 的 测试 。 一 台 在 Boeing 757 上 的 系统 应 该 比 一 个 用 于 公共 图 书馆 中 检索 资料 的 系统 
需要 更 多 的 测试 。 一 个 用 来 控制 银行 证 券 实 时 交易 的 系统 应 该 比 一 个 简单 的 网 上 实时 交 
流 系统 具有 更 大 的 可 靠 性 与 可 信和 度 。 一 个 用 于 国防 的 大 型 安全 关键 软件 的 开发 组 比 一 个 
网 络 游戏 软件 开发 组 要 有 苛刻 得 多 的 查找 错误 方面 的 要 求 。 
(2) 可 能 出 现 的 用 户 数 量 
一 个 系统 的 目标 用 户 数量 的 多 少 也 在 很 大 程度 上 影响 了 测试 必要 性 的 程度 。 这 主要 
是 由 于 用 户 团 体 在 经 济 方面 的 影响 。 一 个 在 全 世界 范围 内 有 几 千 个 用 户 的 系统 肯定 比 一 
个 只 在 办 公 室 中 运行 的 有 两 三 个 用 户 的 系统 需要 更 多 的 测试 。 如 果 出 现 问题 ,前 一 个 系 
统 的 经 济 影响 肯定 比 后 一 个 系统 大 。 另 外 ,在 错误 处 理 的 分 配 上 ,所 需 花 费 代 价 的 差别 也 
很 大 。 如 果 在 内 部 系统 中 发 现 了 一 个 严重 的 错误 ,处 理 错误 的 费用 就 会 相对 少 一 些 。 如 
果 要 处 理 一 个 遍布 全 世界 的 错误 则 要 花费 相当 大 的 财力 和 精力 ,而 且 还 会 给 开发 公司 造 
成 严重 的 信誉 危机 和 潜在 用 户 的 流失 。 
(3) 潜在 缺陷 造成 的 影响 
在 考虑 测试 的 必要 性 时 ,还 需要 将 系统 中 所 包含 的 信息 价值 考虑 在 内 。 例 如 一 个 支 
持 许多 家 大 银行 或 众多 证 券 交易 所 的 客户 机 /服务 器 系统 中 一 定 含 有 经 济 价值 非常 高 的 
内 容 。 因 为 由 于 银行 证 券 系统 的 特殊 性 ,一 旦 出 现 问题 ,影响 的 将 不 仅 是 银行 或 证 券 公 
司 ,错误 将 波及 所 有 与 银行 或 证 券 公司 有 业务 往来 的 公司 或 个 人 ,后 果 将 非常 恶劣 。“ 很 
显然 ,这 样 的 大 型 系统 和 其 他 单一 的 小 型 应 用 系统 相 比 ,需要 进行 更 多 的 测试 。 这 两 种 系 
统 的 用 户 都 希望 得 到 高 质量 .无 错误 的 系统 ,但 是 前 一 种 系统 的 影响 比 后 一 种 要 大 得 多 。” 
因此 我 们 应 该 从 经 济 方面 考虑 ,投入 与 经 济 价值 相对 应 的 时 间 和 人 金钱 去 进行 测试 。 
(4) 开发 机 构 的 业务 能 力 
一 个 没有 标准 和 缺少 经 验 的 开发 机 构 很 可 能 会 开发 出 充满 错误 的 软件 系统 。 而 一 个 
建立 了 标准 和 有 很 多 经 验 的 开发 机 构 开发 出 来 的 软件 系统 中 的 错误 将 会 少 很 多 。 然 而 ， 


第 2 章 软件 测试 过 程 与 策略 


那些 需要 进行 大 幅度 改善 的 机 构 反 而 不 大 可 能 认识 到 自身 的 弱点 。 那 些 需 要 进行 更 加 严 
格 的 软件 测试 的 机 构 往往 是 最 不 可 能 进行 这 一 活动 的 。 在 许多 情况 下 ,机构 的 管理 部 门 
并 不 能 真正 地 理解 开发 一 个 高 质量 的 软件 系统 的 好 处 。 反 而 是 那些 拥有 很 多 经 验 和 建立 
了 严格 标准 的 开发 机 构 更 加 重视 软件 测试 的 重要 性 。 
2.1.3 软件 测试 的 充分 性 准则 

软件 测试 的 充分 性 准则 有 以 下 几 点 : 

。 对 任何 软件 都 存在 有 限 的 充分 测试 集合 。 

。 当 一 个 测试 的 数据 集合 对 于 一 个 被 测 的 软件 系统 的 测试 是 充分 的 ,那么 再 多 增加 
一 些 测试 数据 仍然 是 充分 的 。 这 一 特性 称 为 软件 测试 的 单调 性 。 
即使 对 软件 所 有 成 分 都 进行 了 充分 的 测试 ,也 并 不 意味 着 整个 软件 的 测试 已 经 充 
分 了 。 这 一 特性 称 为 软件 测试 的 非 复 合 性 。 
。 即 使 对 一 个 软件 系统 整体 的 测试 是 充分 的 ,也 并 不 意味 着 软件 系统 中 各 个 成 分 都 

已 经 充分 地 得 到 了 测试 。 这 个 特性 称 为 软件 测试 的 非 分 解 性 。 
。 软件 测试 的 充分 性 与 软件 的 需求 .软件 的 实现 都 相关 。 
软件 测试 的 数据 量 正比 于 软件 的 复杂 度 。 这 一 特性 称 为 软件 测试 的 复杂 性 。 
随 着 测试 次 数 的 增加 ,检查 出 软件 缺陷 的 几率 随 之 不 断 减少 。 软 件 测试 具有 回报 
递减 率 。 
2.1.4 软件 测试 的 误区 

随 着 软件 产业 工业 化 、 模 块 化 地 发 展 ,在 软件 开发 组 中 软件 测试 人 员 的 重要 性 也 不 断 
地 突出 。 在 国外 ,很 多 著名 企业 早已 对 软件 测试 工作 十 分 重视 。 比 如 著名 的 微软 公司 ,其 
软件 测试 人 员 与 开发 人 员 的 比例 已 经 达到 2 : 1。 可 见 软件 测试 对 于 一 个 软件 开发 项 目 
的 成 功 与 否 具有 十 分 重要 的 意义 。 但 是 在 实际 的 项 目 开发 与 管理 中 仍然 存在 很 多 管理 上 
或 者 技术 上 的 误区 。 

(1) 期 望 用 测试 自动 化 代替 大 部 分 人 工 劳动 

通过 应 用 自动 化 测试 工具 能 够 帮助 完成 部 分 重复 枯燥 的 手工 作业 ,但 自动 化 测试 工 
具 不 能 完全 代替 人 工 测试 。 一 般 来 讲 , 产 品 化 的 软件 较 适 于 功能 测试 的 自动 化 ,而 由 标准 
模块 组 装 的 系统 更 适合 功能 测试 的 自动 化 ,这 是 因为 这 类 软件 功能 稳定 ,界面 变化 不 大 。 

对 于 测试 自动 化 的 使 用 可 以 按 以 下 规则 来 进行 : 自动 化 20% 的 测试 用 例 , 用 于 覆盖 
80% 的 用 户 操作 密集 的 功能 和 核心 商业 逻辑 (例如 工资 计算 准确 度 要 求 高 ,虽然 每 月 才 执 
行 一 次 )。 实 现 功能 测试 自动 化 来 完成 重复 枯燥 的 回归 测试 任务 ,引入 性 能 测试 自动 化 工 
具 来 改善 测试 的 广度 和 深度 。 自 动 化 会 带 来 一 点 好 处 ,毕竟 机 器 和 脚本 是 客观 的 , 它 总 是 
会 完成 测试 员 所 分 配 的 所 有 任务 ,而 没有 半点 遗漏 ,从 而 有 助 于 测试 员 真 正 掌 握 和 控制 回 
归 测 试 的 覆盖 率 。 


、 


有 
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(2) 忽视 需求 阶段 的 参与 

在 某 些 公司 ,产品 原始 需求 文档 本 来 就 不 是 很 完善 ,从 市 场 调研 人 员 到 项 目 经 理 、 开 
发 经 理 , 开 发 小 组 组 长 ,再 到 具体 编写 代码 的 程序 员 ,每 一 层 之 间 的 传递 都 有 可 能 存在 需 
求 理解 上 的 偏差 。 让 测试 人 员 参 与 需求 阶段 的 工作 ,可 以 在 一 定 程度 上 起 到 双 保 险 ,更 好 
地 杜绝 需求 和 实现 之 间 差 异 的 发 生 。 软 件 测 试 工作 同时 兼顾 了 * 证 明 软 件 的 实现 和 需求 
是 一 致 的 "和 ”验证 软件 在 某 些 情况 下 可 能 会 产生 问题 "两 个 方面 。 因 此 ,测试 人 员 对 需求 
的 理解 就 从 另 一 个 角度 影响 了 整个 测试 工作 的 可 靠 性 和 效率 。 测 试 人 员 和 开发 人 员 同 
时 、 同 等 地 从 上 游 获 得 需求 ,并 持 有 自己 的 理解 ,可 以 排除 部 分 功能 实现 和 需求 错位 的 
问题 。 

(3) 软件 测试 是 技术 要 求 不 高 的 岗位 

单 从 目前 用 人 最 多 的 黑 盒 测试 岗位 来 说 ,要 求 测试 人 员 对 计算 机 技术 的 精通 能 力 或 
许 并 不 是 很 高 。 实 际 上 ,测试 人 员 除 了 逻辑 思维 沟通 能 力 等 自身 素质 外 ,技能 暂且 可 以 
分 为 两 种 : 一 种 是 行业 知识 ,比如 丰富 的 财务 或 ERP 实施 经 验 ; 另 一 种 是 计算 机 技术 , 比 
如 计算 机 语言 程序 设计 和 软件 项 目 开发 经 验 。 

好 的 测试 人 员 ,不 但 要 不 懈 地 执行 常规 的 测试 任务 ,更 要 有 严谨 的 态度 和 绩 密 的 思 
维 , 去 覆盖 更 多 的 “可 能 ” ,发现 别 人 很 难 找到 的 软件 缺陷 。 要 利用 自己 丰富 的 行业 经 验 ， 
判断 从 需求 到 系统 功能 的 实现 是 否 合理 。 要 站 在 一 定 高 度 对 软件 框架 、 设 计 方法 、 项 目 管 
理 等 做 出 合理 的 建议 。 

所 有 这 些 , 加 上 软件 测试 管理 相关 的 其 他 技术 (如 配置 管理 等 ), 对 于 一 名 合格 的 软件 
测试 人 员 的 素质 要 求 是 很 高 的 。 


2.2 软件 测试 的 流程 


2.2.1 软件 开发 的 V 模型 


1. V 模型 

软件 测试 是 有 阶段 性 的 ,而 软件 测试 的 流程 与 软件 设计 周期 究竟 是 什么 样 的 关系 呢 ? 
关于 软件 开发 流程 的 V 模型 是 一 个 广为人知 的 模型 ,如 图 2-2 所 示 。 在 V 模型 中 ,从 左 
到 右 描述 了 基本 的 开发 过 程 和 测试 行为 ,为 软件 的 开发 人 员 和 测试 管理 者 提供 了 一 个 极 
为 简单 的 框架 。V 模型 的 价值 在 于 它 非常 明确 地 标明 了 测试 过 程 中 存在 的 不 同 级 别 , 并 
且 清 楚 地 描述 了 这 些 测试 阶段 和 开发 过 程 期 间 各 阶段 的 对 应 关系 。 

在 V 模型 中 各 个 测试 阶段 的 执行 流程 是 : 单元 测试 是 基于 代码 的 测试 ,最 初 由 开发 
人 员 执 行 , 以 验证 其 可 执行 程序 代码 的 各 个 部 分 是 否 已 达到 了 预期 的 功能 要 求 ; 集成 测 
试验 证 了 两 个 或 多 个 单元 之 间 的 集成 是 否 正确 ,并 且 有 针对 性 地 对 详细 设计 中 所 定义 的 
各 单元 之 间 的 接口 进行 检查 ; 在 单元 测试 和 集成 测试 完成 之 后 ,系统 测试 开始 用 客户 环 
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境 模拟 系统 的 运行 ,以 验证 系统 是 否 达 到 了 在 概要 设计 中 所 定义 的 功能 和 性 能 ; 最 后 , 当 
技术 部 门 完 成 了 所 有 测试 工作 ,由 业务 专家 或 用 户 进 行 验收 测试 ,以 确保 产品 能 真正 符合 
用 户 业 务 上 的 需要 。 图 2-2 描绘 出 了 各 个 测试 环节 在 整个 软件 测试 工作 中 的 相互 联系 与 
制约 关系 。 
需求 分 析 险 收 测试 
概要 设计 系统 出 汪 
确认 测试 
详细 设计 
本 

图 2-2 V 模型 示意 图 

2. 软件 测试 过 程 


软件 测试 过 程 按 各 测试 阶段 的 先后 顺序 可 分 为 单元 测试 .集成 测试 .确认 (有 效 性 ) 测 
试 、 系 统 测试 和 验收 (用 户 ) 测 试 5 个 阶段 ,如 图 2-3 所 示 。 


被 测 模块 


潜 测 半 注 了 


已 确认 
Ee 倚 本 可 交 
的 软件 和 


图 2-3 测试 各 阶段 示意 图 


(1) 单元 测试 : 测试 执行 的 开始 阶段 。 测 试 对 象 是 每 个 单元 ,测试 目的 是 保证 每 个 
模块 或 组 件 能 正常 工作 。 单 元 测试 主要 采用 白 盒 测试 方法 ,检测 程序 的 内 部 结构 。 


区 
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(2) 集成 测试 : 也 称 组 装 测试 。 在 单元 测试 基础 上 ,对 已 测试 过 的 模块 进行 组 装 , 进 
行 集成 测试 。 测 试 目的 是 检验 与 接口 有 关 的 模块 之 间 的 问题 。 集 成 测试 主要 采用 黑 盒 测 
试 方法 。 

(3) 确认 测试 : 也 称 有 效 性 测试 。 在 完成 集成 测试 后 ,验证 软件 的 功能 和 性 能 及 其 
他 特性 是 否 符合 用 户 要求 。 测 试 目的 是 保证 系统 能 够 按照 用 户 预 定 的 要 求 工作 。 确 认 测 
试 通常 采用 黑 盒 测试 方法 。 

(4) 系统 测试 : 在 完成 确认 测试 后 ,为 了 检验 它 能 否 与 实际 环境 (如 软 硬 件 平台 、 数 
据 和 人 员 等 ) 协 调 工作 ,还 需要 进行 系统 测试 。 可 以 说 ,系统 测试 之 后 ,软件 产品 基本 满足 
开发 要 求 。 

(5) 验收 测试 ; 测试 过 程 的 最 后 一 个 阶段 。 验 收 测试 主要 突出 用 户 的 作用 ,同时 软 
件 开发 人 员 也 应 该 参与 进去 。 

软件 测试 阶段 的 输入 信息 包括 两 类 ; 

。 软件 配 置 : 指 测试 对 象 。 通 常 包括 需求 说 明 书 ,设计 说 明 书 和 被 测试 的 源 程 

序 等 ; 
。 测试 配置 , 通常 包括 测试 计划 ,测试 步 又 ,测试 用 例 以 及 具体 实施 测试 的 测试 程 
序 测试 工具 等 。 

对 测试 结果 与 预期 的 结果 进行 比较 以 后 , 即 可 判断 是 否 存 在 错误 ,决定 是 否 进入 排 错 
阶段 ,进行 调试 任务 。 对 修改 以 后 的 程序 要 进行 重新 测试 ,因为 修改 可 能 会 带 来 新 的 
问题 。 

通常 根据 出 错 的 情况 得 到 出 错 率 来 预 估 被 测 软 件 的 可 靠 性 ,这 将 对 软件 运行 后 的 维 
护 工作 有 重要 价值 。 

2.2.2 单元 测试 


1. 单元 测试 的 定义 

单元 测试 (Unit Testing) 是 对 软件 基本 组 成 单元 进行 的 测试 。 单 元 测试 的 对 象 是 软 
件 设计 的 最 小 单位 一 一 模块 。 很 多 人 将 单元 的 概念 误解 为 一 个 具体 函数 或 一 个 类 的 方 
法 ,这 种 理解 并 不 准确 。 作 为 一 个 最 小 的 单元 应 该 有 明确 的 功能 定义 、 性 能 定义 和 接口 定 
义 , 而 且 可 以 清晰 地 与 其 他 单元 区 分 开 来 。 一 个 菜单 一 个 显示 界面 或 者 能 够 独立 完成 的 
具体 功能 都 可 以 是 一 个 单元 。 从 某 种 意义 上 单元 的 概念 已 经 扩展 为 组 件 (component)。 

单元 测试 通常 是 开发 者 编写 的 一 小 段 代码 ,用 于 检验 被 测 代码 的 一 个 很 小 的 、 很 明确 
的 功能 是 否 正确 。 通 常 而 言 ,一 个 单元 测试 是 用 于 判断 某 个 特定 条 件 ( 或 者 场景 ) 下 某 个 
特定 函数 的 行为 。 例 如 ,可 以 把 一 个 很 大 的 值 放 入 一 个 有 序 表 中 去 ,然后 确认 该 值 出 现在 
有 序 表 的 尾部 。 或 者 从 字符 串 中 删除 匹配 某 种 模式 的 字符 ,然后 确认 字符 串 确 实 不 再 包 
含 这 些 字符 了 。 单 元 测试 是 由 程序 员 自 己 来 完成 ,最 终 受 益 的 也 是 程序 员 自 己 。 可 以 这 
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么 说 ,程序 员 有 责任 编写 功能 代码 ,同时 也 就 有 责任 为 自己 的 代码 编写 单元 测试 。 执 行 单 
元 测试 ,就 是 为 了 证 明 这 段 代 码 的 行为 和 期 望 的 一 致 。 打 一 个 比喻 ,单元 测试 就 像 工厂 在 
组 装 一 台电 视 机 之 前 ,会 对 每 个 元 件 都 进行 测试 ,这 就 是 单元 测试 。 其 实 我 们 每 天 都 在 做 
单元 测试 。 你 写 了 一 个 函数 ,除了 极 简单 的 外 ,总 是 要 执行 一 下 ,看 看 软件 的 功能 是 否 正 
常 ,有 时 还 要 想 办 法 输出 些 数 据 , 比 如 弹出 信息 窗口 等 ,这 也 是 单元 测试 。 一 般 把 这 种 单 
元 测试 称 为 临时 单元 测试 。 对 于 程序 员 来 说 ,如 果 养 成 了 对 自己 写 的 代码 进行 单元 测试 
的 习惯 ,不 但 可 以 写 出 高 质量 的 代码 ,而 且 还 能 提高 编程 水 平 。 


2. 单元 测试 的 目标 

单元 测试 的 主要 目标 是 确保 各 单元 模块 被 正确 地 编码 。 单 元 测试 除了 保证 测试 代码 
的 功能 性 ,还 需要 保证 代码 在 结构 上 具有 可 靠 性 和 健全 性 ,并 且 能 够 在 所 有 条 件 下 正确 响 
应 。 进 行 全 面 的 单元 测试 ,可 以 减少 应 用 级 别 所 需 的 工作 量 , 并 且 彻 底 减 少 系统 产生 错误 
的 可 能 性 。 如 果 和 手动 执行 ,单元 测试 可 能 需要 大 量 的 工作 ,自动 化 测试 会 提高 测试 效率 。 

3. 单元 测试 的 内 容 

单元 测试 的 主要 内 容 有 : 模块 接口 测试 ; 局 部 数据 结构 测试 ; 独立 路 径 测 试 ; 出 错 
处 理 测 试 ; 边界 条 件 测试 。 如 图 2-4 所 示 ,这 些 测 试 都 作用 于 模块 ,共同 完成 单元 测试 
任务 。 

模块 接口 


出 错 处 理 ~ 有 局 部 数据 结构 


模块 


独立 路 径 边界 条 件 
图 2-4 单元 测试 任务 


。 模块 接口 测试 : 对 通过 被 测 模块 的 数据 流 进行 测试 。 为 此 ,对 模块 接口 ,包括 参 
数 表 、 调 用 子 模块 的 参数 全 程 数 据 、 文 件 输入 /输出 操作 都 必须 检查 。 

。 局 部 数据 结构 测试 : 设计 测试 用 例 检 查 数据 类 型 说 明 、 初 始 化 .默认 值 等 方面 的 
问题 ,还 要 查 清 全 程 数据 对 模块 的 影响 。 

"独立 路 径 测试 : 选择 适当 的 测试 用 例 ,对 模块 中 重要 的 执行 路 径 进 行 测试 。 基 本 
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路 径 测 试 和 循环 测试 可 以 发 现 大 量 的 路 径 错误 ,是 最 常用 且 最 有 效 的 测试 技术 。 

。 出错 处 理 测试 : 检查 模块 的 错误 处 理 功 能 是 否 包 含有 错误 或 缺陷 。 例 如 ,是 否 拒 
绝 不 合理 的 输入 ; 出 错 的 描述 是 否 难 以 理解 .是 否 对 错误 定位 有 误 、 是 否 出 错 原 
因 报 告 有 误 、 是 否 对 错误 条 件 的 处 理 不 正确 ; 在 对 错误 处 理 之 前 错误 条 件 是 否 已 
经 引起 系统 的 干预 等 。 

。 边界 条 件 测试 : 要 特别 注意 数据 流 、 控 制 流 中 刚好 等 于 、 大 于 或 小 于 确定 的 比较 
值 时 出 错 的 可 能 性 。 对 这 些 地 方 要 仔细 地 选择 测试 用 例 , 认 真 加 以 测试 。 此 
外 ,如 果 对 模块 运行 时 间 有 要 求 , 还 要 专门 进行 关键 路 径 测 试 ,以 确定 最 坏 情 况 
下 和 平均 意义 下 影响 模块 运行 时 间 的 因素 。 这 类 信息 对 进行 性 能 评价 是 十 分 
有 用 的 。 


4. 单元 测试 的 步骤 

通常 单元 测试 在 编码 阶段 进行 。 当 源 程序 代码 编制 完成 ,经 过 评审 和 验证 ,确认 没有 
语法 错误 之 后 ,就 开始 进行 单元 测试 的 测试 用 例 设 计 。 利 用 设计 文档 ,设计 可 以 验证 程序 
功能 、 找 出 程序 错误 的 多 个 测试 用 例 。 对 于 每 一 组 输入 ,应 有 预期 的 正确 结果 。 

模块 接口 测试 中 的 被 测 模块 并 不 是 一 个 独立 的 程序 ,在 考虑 测试 模块 时 ,同时 要 考虑 
它 和 外 界 的 联系 ,用 一 些 辅助 模块 去 模拟 与 被 测 模块 相关 联 的 其 他 模块 。 这 些 辅助 模块 
可 分 为 两 种 : 

(1) 驱动 模块 (driver): 相当 于 被 测 模块 的 主 程序 。 它 接收 测试 数据 ,把 这 些 数据 传 
送 给 被 测 模块 ,最 后 输出 实测 结果 。 

(2) 桩 模块 (stub): 用 以 代替 被 测 模块 调用 的 子 模块 。 桩 模块 可 以 做 少量 的 数据 操 
作 ,不 需要 把 子 模块 所 有 功能 都 带 进来 ,但 不 允许 什么 事情 也 不 做 。 

被 测 模块 .与 它 相关 的 驱动 模块 以 及 桩 模块 共同 构成 了 一 个 “测试 环境 ”, 如 图 2-5 
所 示 。 


测试 用 例 上 一定 驱动 模块 


桩 模块 桩 模块 
图 2-5 单元 测试 环境 


如 果 一 个 模块 要 完成 多 种 功能 ,并 且 以 程序 包 或 对 象 类 的 形式 出 现 , 例 如 Ada 中 的 
包 ,MODULA 中 的 模块 ,C++ 中 的 类 ,这 时 可 以 将 模块 看 成 由 几 个 小 程序 组 成 。 对 其 中 
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的 每 个 小 程序 先进 行 单元 测试 要 做 的 工作 ,对 关键 模块 还 要 做 性 能 测试 。 对 支持 某 些 标 
准 规程 的 程序 ,更 要 着 手 进行 互联 测试 。 有 人 把 这 种 情况 特别 称 为 模块 测试 ,以 区 别 单元 
测试 。 

5. 采用 单元 测试 的 原因 

程序 员 编 写 代 码 时 ,一 定 会 反复 调试 保证 其 能 够 编译 通过 。 如 果 是 编译 没有 通过 的 
代码 ,没有 任何 人 会 愿意 交付 给 自己 的 老板 。 但 代码 通过 编译 ,只 是 说 明了 它 的 语法 正 
确 ,程序 员 却 无 法 保证 它 的 语义 也 一 定 正确 。 没 有 任何 人 可 以 轻易 承诺 这 段 代码 的 行为 
一 定 是 正确 的 ,单元 测试 这 时 会 为 此 做 出 保证 。 编 写 单元 测试 就 是 用 来 验证 这 段 代码 的 
行为 是 否 与 软件 开发 人 员 期 望 的 一 致 。 有 了 单元 测试 ,程序 员 可 以 自信 地 交付 自己 的 代 
码 , 而 没有 任何 的 后 顾 之 忧 。 

什么 时 候 进 行 单元 测试 呢 ? 单元 测试 越 早 越 好 。 早 到 什么 程度 呢 ? 开发 理论 讲究 
TDD( 测 试 驱动 开发 ), 即 先 编写 测试 代码 ,再 进行 开发 。 在 实际 的 工作 中 ,可 以 不 必 过 分 
强调 先 干什么 后 干什么 ,重要 的 是 高 效 和 感觉 舒适 。 从 实际 开发 经 验 来 看 , 先 编写 产品 函 
数 的 框架 ,然后 编写 测试 函数 ,针对 产品 函数 的 功能 编写 测试 用 例 ,然后 编写 产品 函数 的 
代码 ,每 写 一 个 功能 点 都 运行 测试 ,随时 补充 测试 用 例 。 所 谓 先 编写 产品 函数 的 框架 ,是 
指 先 编写 函数 空 的 实现 ,有 返回 值 的 随便 返回 一 个 值 .编译 通过 后 青 编写 测试 代码 。 这 
时 ,函数 名 .参数 表 、 返 回 类 型 都 应 该 确定 下 来 了 ,所 编写 的 测试 代码 以 后 需 修改 的 可 能 性 
比较 小 。 

由 谁 来 完成 单元 测试 呢 ? 单元 测试 与 其 他 测试 不 同 , 单 元 测试 可 看 作 是 编码 工作 的 
一 部 分 ,应 该 由 程序 员 完 成 。 也 就 是 说 ,经 过 了 单元 测试 的 代码 才 是 已 完成 的 代码 ,提交 
产品 代码 时 也 要 同时 提交 测试 代码 。 测 试 部 门 可 以 进行 一 定 程度 的 审核 。 在 传统 的 结构 
化 编程 语言 中 ,比如 C 语言 ,要 进行 测试 的 单元 一 般 是 函数 或 子 过 程 。 在 像 C++ 这 样 的 
面向 对 象 的 语言 中 ,要 进行 测试 的 基本 单元 是 类 。 对 Ada 语言 来 说 ,开发 人 员 可 以 选择 
是 在 独立 的 过 程 和 函数 ,还 是 在 Ada 包 的 级 别 上 进行 单元 测试 。 单 元 测试 的 原则 同样 被 
扩展 到 第 四 代 语 言 (4GL) 的 开发 中 ,在 这 里 基本 单元 被 典型 地 划分 为 一 个 菜单 或 显示 界 
面 。 单 元 测试 是 作为 无 错 编码 的 一 种 辅助 手段 ,在 一 次 性 的 开发 过 程 中 使 用 。 另 外 ,单元 
测试 必须 是 可 重复 的 ,无 论 是 在 软件 修改 ,还 是 移植 到 新 的 运行 环境 的 过 程 中 。 因 此 ,所 
有 的 测试 都 必须 在 整个 软件 系统 的 生命 周期 中 进行 维护 。 

通过 单元 测试 ,测试 人 员 可 以 验证 开发 人 员 所 编写 的 代码 是 按照 先前 设想 的 方式 进 
行 的 ,输出 结果 符合 预期 值 .这 就 实现 了 单元 测试 的 目的 。 与 后 面 的 测试 相 比 ,单元 测试 
创建 简单 ,维护 容易 ,并 且 可 以 更 方便 地 重复 。 《实用 软件 度量 》(Capers Jones, McGraw- 
Hill,1991) 列 出 了 准备 测试 .执行 测试 和 修改 缺陷 所 花费 的 时 间 ( 以 一 个 功能 点 为 基准 )， 
这 些 测试 显示 出 了 单元 测试 的 成 本 效率 大 约 是 集成 测试 的 两 倍 ` 系 统 测试 的 三 倍 , 如 图 2-6 
所 示 。 术 语 域 测试 是 指 软件 在 投入 使 用 后 ,针对 某 个 领域 所 作 的 所 有 测试 活动 。 
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2.2.3 集成 测试 


1. 集成 测试 的 定义 

在 完成 单元 测试 的 基础 上 ,需要 将 所 有 模块 按照 设计 要 求 组 装 成 为 系统 。 这 时 需要 
考虑 以 下 问题 : 

。 在 把 各 个 模块 连接 起 来 的 时 候 , 穿 越 模块 接口 的 数据 是 否 会 丢失 ， 

。 一 个 模块 的 功能 是 否 会 对 另 一 个 模块 的 功能 产生 不 利 的 影响 ; 

。 各 个 子 功能 组 合 起 来 ,能 和 否 达到 预期 要 求 的 父 功能 ; 

。 全 局 数据 结构 是 否 有 问题 ; 

。 单个 模块 的 误差 累积 起 来 ,是 否 会 放大 ,从 而 达到 不 能 接受 的 程度 ; 

。 单个 模块 的 错误 是 否 会 导致 数据 库 错误 。 

集成 测试 (Integration Testing) 是 介 于 单元 测试 和 系统 测试 之 间 的 过 渡 阶 段 , 与 软件 
开发 计划 中 的 软件 概要 设计 阶段 相对 应 ,是 单元 测试 的 扩展 和 延伸 。 集 成 测试 的 定义 是 
根据 实际 情况 对 程序 模块 采用 适当 的 集成 测试 策略 组 装 起 来 ,对 系统 的 接口 以 及 集成 后 
的 功能 进行 正确 校 验 的 测试 工作 。 集 成 测试 也 称 为 综合 测试 。 实 践 表明 ,软件 的 一 些 模 
块 能 够 单独 地 工作 ,但 并 不 能 保证 连接 之 后 也 肯定 能 正常 工作 。 程 序 在 某 些 局 部 反映 不 
出 来 的 问题 ,在 全 局 上 有 可 能 暴露 出 来 ,影响 软件 功能 的 实现 。 所 以 ,集成 测试 是 针对 程 
序 整体 结构 的 测试 。 

2. 集成 测试 的 层次 

软件 的 开发 过 程 是 一 个 从 需求 分 析 到 概要 设计 、 详 细 设计 以 及 编码 实现 的 逐步 细 化 
的 过 程 ,那么 单元 测试 到 集成 测试 再 到 系统 测试 就 是 一 个 逆向 求证 的 过 程 。 集 成 测试 内 
部 对 于 传统 软件 和 面向 对 象 的 应 用 系统 有 两 种 层次 的 划分 。 

对 于 传统 软件 来 讲 , 可 以 把 集成 测试 划分 为 三 个 层次 : 

。 模块 内 集成 测试 ; 

。 子 系统 内 集成 测试 ; 
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。 子 系统 间 集 成 测试 。 

对 于 面向 对 象 的 应 用 系统 来 说 ,可 以 把 集成 测试 分 为 两 个 阶段 : 
。 类 内 集成 测试 ; 

。 类 间 集 成 测试 。 


3. 集成 测试 的 模式 
选择 什么 方式 把 模块 组 装 起 来 形成 一 个 可 运行 的 系统 ,直接 影响 到 模块 测试 用 例 的 
形式 .所 用 测试 工具 的 类 型 .模块 编号 的 次 序 和 测试 的 次 序 、 生 成 测试 用 例 的 费用 和 调试 
的 费用 。 集 成 测试 模式 是 软件 集成 测试 中 的 策略 体现 ,其 重要 性 是 明显 的 ,直接 关系 到 软 
件 测试 的 效率 、 结 果 等 ,一 般 是 根据 软件 的 具体 情况 来 决定 采用 哪 种 模式 。 通 常 , 把 模块 
组 装 成 为 系统 的 测试 方式 有 两 种 : 
(1) 一 次 性 集成 测试 方式 (No-Incremental Integration) 
一 次 性 集成 测试 方式 也 称 作 非 增值 式 集成 测试 。 先 分 别 测试 每 个 模块 ,再 把 所 有 模 
块 按 设计 要 求 放 在 一 起 结合 成 所 需要 实现 的 程序 。 
如 图 2-7 所 示 是 按照 一 次 性 集成 测试 方式 的 实例 。 图 2-7(a) 表 示 的 是 整个 系统 结 
构 , 共 包含 6 个 模块 。 具体 测试 过 程 如 下 : 
。 为 模块 B 配备 驱动 模块 Dl, 来 模拟 模块 A 对 B 的 调用 ; 为 模块 也 配备 桩 模块 
S1 ,来 模拟 模块 下 被 B 调用。 对 模块 B 进行 单元 测试 ,如 图 2-7(b) 所 示 。 
。 为 模块 D 配备 驱动 模块 D3, 来 模拟 模块 A 对 D 的 调用 。 为 模块 D 配备 桩 模块 
S2, 来 模拟 模块 下 被 D 调用 。 对 模块 D 进行 单元 测试 ,如 图 2-7(d) 所 示 。 
。 为 模块 CE 下 分别 配备 驱动 模块 D2、D4、D5 ,对 模块 CE.\F 分 别 进行 单元 测试 ， 
如 图 2-7(c) .图 2-7(e) .图 2-7(f) 所 示 。 


A DI D2 D3 


B C | | D | B 六 D 
| 
E | F | sl S2 
(a) (b) (0) (d) 
D4 D5 A 
E F S3 S4 S5 
(©) (f) (8) 


图 2-7 一 次 性 集成 测试 方式 
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。 为 主 模块 A 配备 三 个 桩 模块 S3、S4、S5, 对 模块 A 进行 单元 测试 ,如 图 2-7(g) 
所 示 。 

。 在 将 模块 A、.B.C、D.,E 分 别 进行 了 单元 测试 之 后 ,再 一 次 性 进行 集成 测试 。 

。 测试 结束 。 

(2) 增值 式 集成 测试 方式 

把 下 一 个 要 测试 的 模块 同 已 经 测 好 的 模块 结合 起 来 进行 测试 ,测试 完毕 ,再 把 下 一 个 
应 该 测试 的 模块 结合 进来 继续 进行 测试 。 在 组 装 的 过 程 中 边 连 接 边 测试 ,以 发 现 连接 过 
程 中 产生 的 问题 。 通 过 增值 逐步 组 装 成 为 预先 要 求 的 软件 系统 。 增 值 式 集成 测试 方式 有 
以 下 三 种 。 

Q@ 自 项 向 下 增值 测试 方式 (Top-down Integration) 

主 控 模块 作为 测试 驱动 ,所 有 与 主 控 模块 直接 相连 的 模块 作为 桩 模块 ; 根据 集成 的 
方式 (深度 或 广度 ) ,每 次 用 一 个 模块 把 从 属 的 桩 模块 蔡 换 成 真正 的 模块 ; 在 每 个 模块 被 
集成 时 ,都 必须 已 经 进行 了 单元 测试 ; 进行 回归 测试 以 确定 集成 新 模块 后 没有 引入 错误 。 
这 种 组 装 方式 将 模块 按 系 统 程 序 结构 , 沿 着 控制 层次 自 项 向 下 进行 组 装 。 自 顶 向 下 的 增 
值 方式 在 测试 过 程 中 较 早 地 验证 了 主要 的 控制 和 判断 点 。 选 用 按 深度 方向 组 装 的 方式 ， 
可 以 首先 实现 和 验证 一 个 完整 的 软件 功能 。 

图 2-8 表示 的 是 按照 深度 优先 方式 遍历 的 自 顶 向 下 增值 的 集成 测试 实例 。 具 体 测试 
过 程 如 下 : 

。 在 树 状 结构 图 中 ,按照 先 左 后 右 的 顺序 确定 模块 集成 路 线 。 

。 如 图 2-8(a) 所 示 , 先 对 顶层 的 主 模 块 A 进行 单元 测试 ,就 是 对 模块 A 配 以 桩 模块 

S1、S2 和 S3, 用 来 模拟 它 所 实际 调用 的 模块 B.C、D, 然 后 进行 测试 。 

。 如 图 2-8(b) 所 示 ,用 实际 模块 B 替换 掉 桩 模块 S1 ,与 模块 A 连接 ,再 对 模块 B 配 

以 桩 模块 S4, 用 来 模拟 模块 B 对 E 的 调用 ,然后 进行 测试 。 

。 图 2-8(c) 是 将 模块 EE 替换 掉 桩 模块 S4 并 与 模块 B 相连 ,然后 进行 测试 。 

。 判断 模块 丰 没 有 叶子 结 点 ,也 就 是 说 以 A 为 根 结 点 的 树 状 结构 图 中 的 最 左 侧 分 
支 深度 遍历 结束 ,转向 下 一 个 分 支 。 

。 如 图 2-8(d) 所 示 ,模块 C 蔡 换 掉 桩 模块 S2, 连 到 模块 A 上 ,然后 进行 测试 。 

。 判断 模块 C 没有 桩 模块 , 转 到 树 状 结构 图 的 最 后 一 个 分 支 。 

。 如 图 2-8(e) 所 示 ,模块 D 替换 掉 桩 模块 S3 , 连 到 模块 A 上 ,同时 给 模块 D 配 以 桩 
模块 S5 ,来 模拟 其 对 模块 下 的 调用 ,然后 进行 测试 。 

。 如 图 2-8(f) 所 示 ,去 掉 桩 模块 S5, 蔡 换 成 实际 模块 下 连接 到 模块 D 上 ,然后 进行 
测试 。 

。 对 树 状 结构 图 进行 了 完全 测试 ,测试 结束 。 
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图 2-8 自 项 向 下 增值 测试 方式 


@ 自 底 向 上 增值 测试 方式 (Bottom-up Integration) 

组 装 从 最 底层 的 模块 开始 ,组 合成 一 个 构件 ,用 以 完成 指定 的 软件 子 功 能 。 编 制 驱 动 
程序 ,协调 测试 用 例 的 输入 与 输出 ; 测试 集成 后 的 构件 ; 按 程序 结构 向 上 组 装 测试 后 的 
构件 ,同时 除 掉 驱 动 程序 。 这 种 组 装 的 方式 是 从 程序 模块 结构 的 最 底层 模块 开始 组 装 和 
测试 。 因 为 模块 是 自 底 向 上 进行 组 装 ,对 于 一 个 给 定 层 次 的 模块 , 它 的 子 模块 (包括 子 模 
块 的 所 有 下 属 模块 ) 已 经 组 装 并 测试 完成 ,所 以 不 再 需要 桩 模块 。 在 模块 的 测试 过 程 中 如 
果 需 要 从 子 模块 得 到 信息 时 可 以 直接 运行 子 模块 获得 。 

图 2-9 表示 的 是 按照 自 底 向 上 增值 的 集成 测试 例子 。 首 先 , 对 处 于 树 状 结构 图 中 叶 
子 结 点 位 置 的 模块 EC 进行 单元 测试 ,如 图 2-9(a) .图 2-9(b) 和 图 2-9(c) 所 示 ,分 别 配 
以 驱动 模块 D1.D2 和 D3 ,用 来 模拟 模块 B、 模 块 A 和 模块 D 对 它们 的 调用 。 然 后 ,如 
图 2-9(d) 和 图 2-9(e) 所 示 ,去 掉 驱 动 模块 D1 和 D3 ,替换 成 模块 B 和 了 D 分 别 与 模块 下 和 
F 相连 ,并且 设 立 驱动 模块 D4 和 D5 进行 局 部 集成 测试 。 最 后 ,如 图 2-9(f) 所 示 , 对 整个 
系统 结构 进行 集成 测试 。 

@ 混合 增值 测试 方式 (Modified Top-down Integration) 

自 顶 向 下 增值 的 方式 和 自 底 向 上 增值 的 方式 各 有 优 缺 点 。 

自 顶 向 下 增值 方式 的 缺点 是 需要 建立 桩 模块 。 要 使 桩 模块 能 够 模拟 实际 子 模块 的 功 
能 是 十 分 困难 的 ,同时 涉及 复杂 算法 。 真 正 输入 /输出 的 模块 处 在 底层 ,它们 是 最 容易 出 
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图 2-9 自 底 向 上 增值 测试 方式 


问题 的 模块 ,并 且 直 到 组 装 和 测试 的 后 期 才 遇 到 这 些 模块 ,一 旦 发 现 问题 ,会 导致 过 多 的 
回归 测试 。 
自 项 向 下 增值 方式 的 优点 是 能 够 较 早 地 发 现在 主要 控制 方面 存在 的 问题 。 
自 底 向 上 增值 方式 的 缺点 是 “程序 一 直 未 能 作为 一 个 实体 存在 ,直到 最 后 一 个 模块 加 
上 去 后 才 形 成 一 个 实体 ”。 就 是 说 ,在 自 底 向 上 组 装 和 测试 的 过 程 中 ,对 主要 的 控制 直到 
最 后 才 接触 到 。 

自 底 向 上 增值 方式 的 优点 是 不 需要 桩 模块 ,建立 驱动 模块 一 般 比 建立 桩 模块 容易 , 同 
时 由 于 涉及 复杂 算法 和 真正 输入 /输出 的 模块 最 先 得 到 组 装 和 测试 ,可 以 把 最 容易 出 问题 
的 部 分 在 早期 解决 。 此 外 自 底 向 上 增值 的 方式 可 以 实施 多 个 模块 的 并 行 测试 。 

有 鉴于 此 ,通常 是 把 以 上 两 种 方式 结合 起 来 进行 组 装 和 测试 。 

*。 改进 的 自 顶 向 下 增值 测试 : 基本 思想 是 强化 对 输入 /输出 模块 和 引入 新 算法 模块 
的 测试 ,并 自 底 向 上 组 装 成 为 功能 相当 完整 且 相 对 独立 的 子 系统 ,然后 由 主 模块 
开始 自 项 向 下 进行 增值 测试 。 

。 自 底 向 上 一 自 顶 向 下 的 增值 测试 (混和 法 ): 首先 对 含 读 操作 的 子 系统 自 底 向 上 
直至 根 结 点 模块 进行 组 装 和 测试 ,然后 对 含 写 操作 的 子 系统 做 自 顶 向 下 的 组 装 与 
测试 。 

， 回归 测试 : 这 种 方式 采取 自 顶 向 下 的 方式 测试 被 修改 的 模块 及 其 子 模块 ,然后 将 
这 一 部 分 视 为 子 系统 ,再 自 底 向 上 测试 ,以 检查 该 子 系统 与 其 上 级 模块 的 接口 是 
否 适 配 。 
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(3) 一 次 性 集成 测试 方式 与 增值 式 集成 测试 方式 的 比较 

， 增 值 式 集成 方式 需要 编写 的 软件 较 多 ,工作 量 较 大 ,花费 的 时 间 较 多 ,一 次 性 集成 
方式 的 工作 量 较 小 ; 

。 增 值 式 集成 方式 发 现 问题 的 时 间 比 一 次 性 集成 方式 早 ， 

增值 式 集成 方式 比 一 次 性 集成 方式 更 容易 判断 出 问题 的 所 在 ,因为 出 现 的 问题 往 

往 和 最 后 加 进来 的 模块 有 关 ; 

。 增 值 式 集成 方式 测试 得 更 为 彻底 ， 

。 使 用 一 次 性 集成 方式 可 以 多 个 模块 并 行 测试 。 

这 两 种 模式 各 有 利 矣 ,在 时 间 条 件 允 许 的 情况 下 采用 增值 式 集成 测试 方式 有 一 定 的 
优势 。 

(4) 集成 测试 的 组 织 和 实施 

集成 测试 是 一 种 正规 测试 过 程 ,必须 精心 计划 ,并 与 单元 测试 的 完成 时 间 协调 起 来 。 
在 制定 测试 计划 时 ,应 考虑 如 下 因素 : 

。 采 用 何 种 系统 组 装 方法 来 进行 组 装 测试 ， 

。 组 装 测试 过 程 中 连接 各 个 模块 的 顺序 ， 

。 模 块 代码 编制 和 测试 进度 是 否 与 组 装 测试 的 顺序 一 致 ， 

。 测试 过 程 中 是 否 需 要 专门 的 硬件 设备 。 

解决 了 上 述 问题 之 后 ,就 可 以 列 出 各 个 模块 的 编制 测试 计划 表 ,标明 每 个 模块 单元 
测试 完成 的 日 期 .首次 集成 测试 的 日 期 集成 测试 全 部 完成 的 日 期 ,以 及 需要 的 测试 用 例 
和 所 期 望 的 测试 结果 。 

在 缺少 软件 测试 所 需要 的 硬件 设备 时 ,应 检查 该 硬件 的 交付 日 期 是 否 与 集成 测试 计 
划一 致 。 例 如 , 若 测试 需要 数字 化 仪 和 绘图 仪 , 则 相应 测试 应 安排 在 这 些 设备 能 够 投入 使 
用 之 时 ,并 需要 为 硬件 的 安装 和 交付 使 用 保留 一 段 时 间 ,以 留 下 时 间 余 量 。 此 外 ,在 测试 
计划 中 需要 考虑 测试 所 需 软件 (驱动 模块 . 桩 模块 测试 用 例 生成 程序 等 ) 的 准备 情况 。 

4 集成 测试 完成 的 标志 

判定 集成 测试 过 程 是 否 完成 ,可 按 以 下 几 个 方面 检查 : 

。 成 功 地 执行 了 测试 计划 中 规定 的 所 有 集成 测试 ， 

， 修正 了 所 发 现 的 错误 ; 

。 测试 结果 通过 了 专门 小 组 的 评审 。 

集成 测试 应 由 专门 的 测试 小 组 来 进行 ,测试 小 组 由 有 经 验 的 系统 设计 人 员 和 程序 员 
组 成 。 整 个 测试 活动 要 在 评审 人 员 出 席 的 情况 下 进行 。 在 完成 预定 的 组 装 测试 工作 之 
后 ,测试 小 组 应 负责 对 测试 结果 进行 整理 分 析 , 形 成 测试 报告 。 测 试 报告 中 要 记录 实际 
的 测试 结果 .在 测试 中 发 现 的 问题 .解决 这 些 问题 的 方法 以 及 解决 之 后 再 次 测试 的 结果 。 
此 外 还 应 提出 目前 不 能 解决 .还 需要 管理 人 员 和 开发 人 员 注意 的 一 些 问题 ,提供 测试 评审 
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和 最 终 决 策 , 以 提出 处 理 意 见 。 集 成 测试 需要 提交 的 文档 有 : 集成 测试 计划 、 集 成 测试 规 
格 说 明 、 集 成 测试 分 析 报 告 。 


5. 采用 集成 测试 的 原因 

所 有 的 软件 项 目 都 不 能 摆脱 系统 集成 这 个 阶段 。 不 管 采用 什么 开发 模式 ,具体 的 开 
发 工作 总 得 从 一 个 一 个 的 软件 单元 做 起 ,软件 单元 只 有 经 过 集成 才能 形成 一 个 有 机 的 整 
体 。 具体 的 集成 过 程 可 能 是 显 性 的 也 可 能 是 隐 性 的 。 只 要 有 和 集成 ,总 是 会 出 现 一 些 常 见 
问题 ,工程 实践 中 ,几乎 不 存在 软件 单元 组 装 过 程 中 不 出 任何 问题 的 情况 。 集 成 测试 需要 
花费 的 时 间 远 远 超 过 单元 测试 ,直接 从 单元 测试 过 渡 到 系统 测试 是 非常 危险 的 做 法 ,可 能 
使 整个 软件 开发 项 目 所 耗费 的 时 间 成 倍 的 增加 。 集 成 测试 的 必要 性 还 在 于 一 些 模块 虽然 
能 够 单独 地 工作 ,但 并 不 能 保证 连接 起 来 也 能 正常 工作 。 程 序 在 某 些 局 部 反映 不 出 来 的 
问题 ,有 可 能 在 全 局 上 会 暴露 出 来 ,影响 功能 的 实现 。 
2.2.4 确认 测试 


1. 确认 测试 的 定义 

集成 测试 完成 以 后 ,分 散 开发 的 模块 被 连接 起 来 ,构成 完整 的 程序 ,其 中 各 模块 之 间 
接口 存在 的 种 种 问题 都 已 消除 。 于 是 测试 工作 进入 确认 测试 (Validation Testing) 阶段 。 

什么 是 确认 测试 ,说 法 众多 ,其 中 最 简明 、 最 严格 的 解释 是 检验 所 开发 的 软件 是 否 能 
按 用 户 提 出 的 要 求 运行 , 若 能 达到 这 一 要 求 , 则 认为 开发 的 软件 是 合格 的 。 因 而 有 的 软件 
开发 部 门 把 确认 测试 称 为 合格 性 测试 CQualification Testing)。 这 里 所 说 的 客户 要 求 通 
常 指 的 是 在 软件 规格 说 明 书 中 确定 的 软件 功能 和 技术 指标 ,或 是 专门 为 测试 所 规定 的 确 
认 准 则 。 在 确认 测试 阶段 需要 做 的 工作 如 图 2-10 所 示 。 首 先 要 进行 有 效 性 测试 以 及 软件 
配置 审查 ,然后 进行 验收 测试 和 安装 测试 ,在 通过 了 专家 鉴定 之 后 ,才能 成 为 可 交付 的 软件 。 
选择 测试 人 员 
构造 测试 用 例 


测试 报告 


实际 运行 测试 


软件 计划 


软件 配置 


源 程序 文本 
支持 环境 


图 2-10 ”确认 测试 阶段 的 工作 
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确认 测试 又 称 为 有 效 性 测试 。 它 的 任务 是 验证 软件 的 功能 和 性 能 及 其 特性 是 否 与 客 
户 的 要 求 一 致 。 对 软件 的 功能 和 性 能 要 求 在 软件 需求 规格 说 明 中 已 经 明确 规定 。 


2. 确认 测试 的 准则 

如 何 判 断 被 开发 的 软件 是 否 成 功 呢 ?为 了 确认 它 的 功能 、 性 能 以 及 限制 条 件 是 否 达 
到 了 要 求 , 应 该 怎样 进行 测试 呢 ? 在 需求 规格 说 明 书 中 可 能 作 了 原则 性 规定 ,但 在 测试 阶 
段 需 要 更 详细 、 更 具体 地 在 测试 规格 说 明 书 (Test Specification) 中 作 进 一 步 说 明 。 例 如 ， 
制定 测试 计划 时 ,要 说 明确 认 测试 应 该 测试 哪些 方面 ,并 给 出 必要 的 测试 用 例 。 除 了 考虑 
功能 和 性 能 以 外 ,还 需要 检验 其 他 方面 的 要 求 。 例 如 ,可 移植 性 .兼容 性 、. 可 维护 性 .人 机 
接口 以 及 开发 的 文件 资料 等 是 否 符合 要 求 。 经 过 确认 测试 ,应 该 为 已 开发 的 软件 做 出 结 
论 性 评价 。 有 以 下 两 种 情况 : 

。 经 过 检验 的 软件 功能 ,性 能 及 其 他 要 求 均 已 满足 需求 规格 说 明 书 的 规定 ,因而 可 

被 接受 , 视 为 合格 的 软件 ; 

。 经 过 检验 发 现 与 需求 说 明 书 有 相当 的 偏离 ,得 到 一 个 各 项 缺陷 的 清单 。 

对 于 第 二 种 情况 ,往往 很 难 在 交付 期 以 前 把 发 现 的 问题 纠正 过 来 。 这 就 需要 开发 部 
门 和 客户 进行 协商 , 找 出 解决 的 办 法 。 

3. 进行 确认 测试 

确认 测试 是 在 模拟 的 环境 (可 能 是 就 是 开发 的 环境 ) 下 ,运用 黑 盒 测试 的 方法 ,验证 所 
测试 件 是 否 满足 需求 规格 说 明 书 列 出 的 需求 。 为 此 ,需要 首先 制定 测试 计划 ,规定 要 做 测 
试 的 种 类 ,还 需要 制定 一 组 测试 步骤 ,描述 具体 的 测试 用 例 。 通 过 实施 预定 的 测试 计划 和 
测试 步骤 ,确定 软件 的 特性 是 否 与 需求 相符 ,确保 所 有 的 软件 功能 需求 都 能 得 到 满足 ,所 
有 的 软件 性 能 需求 都 能 达到 ,所 有 的 文档 都 是 正确 且 易于 使 用 。 同 时 ,对 其 他 软件 需求 ， 
例如 可 移植 性 ,兼容 性 自动 恢复 .可 维护 性 等 ,也 都 要 进行 测试 ,确认 是 否 满足 。 


4. 确认 测试 的 结果 

在 全 部 软件 测试 的 测试 用 例 运 行 完 后 ,所 有 的 测试 结果 可 以 分 为 两 类 ， 

。 测试 结果 与 预期 的 结果 相符 。 说 明 软 件 的 这 部 分 功能 或 性 能 特征 与 需求 规格 说 
明 书 相符 合 , 从 而 这 部 分 程序 被 接受 。 

。 测试 结果 与 预期 的 结果 不 符 。 说 明 软 件 的 这 部 分 功能 或 性 能 特征 与 需求 规格 说 
明 不 一 致 ,因此 要 为 它 提交 一 份 问题 报告 。 

通过 与 用 户 的 协商 ,解决 所 发 现 的 缺陷 和 错误 。 确认 测 试 应 交付 的 文档 有 : 确认 测 

试 分 析 报告 .最 终 的 用 户 手册 和 操作 手册 、 项 目 开发 总 结 报告 。 
5. 软件 配置 审查 


软件 配置 审查 是 确认 测试 过 程 的 重要 环节 。 其 目的 是 保证 软件 配置 的 所 有 成 分 都 齐 
全 ,各 方面 的 质量 都 符合 要 求 , 具 备 维护 阶段 所 必需 的 细节 资料 并 且 已 经 编排 好 分 类 的 目 


~、 
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录 。 除 了 按 合同 规定 的 内 容 和 要 求 , 由 工人 审查 软件 配置 之 外 ,在 确认 测试 的 过 程 ,应 当 
严格 遵守 用 户 手册 和 操作 手册 中 规定 的 使 用 步骤 ,以 便 检查 这 些 文档 资料 的 完整 性 和 正 
确 性 。 必 须 仔 细 记 录 发 现 的 遗漏 和 错误 ,并 且 适 当地 补充 和 改正 。 


2.2.5 系统 测试 


1. 系统 测试 的 定义 

软件 产品 离 不 开 运行 环境 ,最 终 还 是 要 和 系统 中 的 其 他 部 分 ,比如 硬件 系统 、 数 据 信 
息 等 集成 起 来 。 因 此 ,在 投入 运行 以 前 要 完成 系统 测试 (System Testing) ,以 保证 各 组 成 
部 分 不 仅 能 单独 地 得 到 检验 ,而 且 在 系统 各 部 分 协调 工作 的 环境 下 也 能 正常 工作 。 尽 管 
每 一 个 检验 有 特定 的 目标 ,然而 所 有 的 检测 工作 都 要 验证 系统 中 每 个 部 分 均 得 到 正确 的 
集成 ,并 完成 制定 的 功能 。 在 软件 的 各 类 测试 中 ,系统 测试 是 最 接近 于 人 们 的 日 常 测试 实 
践 。 它 是 将 已 经 集成 好 的 软件 系统 ,作为 整个 计算 机 系统 的 一 个 元 素 ,与 计算 机 硬件 、 外 
设 、 某 些 支持 软件 数据 和 人 员 等 其 他 系统 元 素 结合 在 一 起 ,在 实际 运行 环境 下 ,对 计算 机 
系统 进行 一 系列 的 组 装 测 试 和 确认 测试。 

2. 系统 测试 的 流程 

系统 测试 流程 如 图 2-11 所 示 。 由 于 系统 测试 的 目的 是 验证 最 终 软件 系统 是 否 满足 
产品 需求 并 且 遵循 系统 设计 ,所 以 在 完成 产品 需求 和 系统 设计 文档 之 后 ,系统 测试 小 组 就 
可 以 提前 开始 制定 测试 计划 和 设计 测试 用 例 ,不 必 等 到 集成 测试 阶段 结束 。 这 样 可 以 提 
高 系统 测试 的 效率 。 


审批 审批 


售 


执 基 
全 管 
| 系 型 
统 
测 改 
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图 2-11 系统 测试 流程 


3. 系统 测试 的 目标 

。 确保 系统 测试 的 活动 是 按 计划 进行 的 ; 

。 验证 软件 产品 是 否 与 系统 需求 用 例 不 相符 合 或 与 之 矛盾 ; 
。 建立 完善 的 系统 测试 缺陷 记录 跟踪 库 ; 

。 确保 软件 系统 测试 活动 及 其 结果 及 时 通知 相关 小 组 和 个 人 。 


S。 
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. 系统 测试 的 方针 


为 项 目 指定 一 个 测试 工程 师 负责 贯彻 和 执行 系统 测试 活动 

测试 组 向 各 事业 部 总 经 理 / 项 目 经 理 报告 系统 测试 的 执行 状况 ; 

系统 测试 活动 遵循 文档 化 的 标准 和 过 程 ; 

向 外 部 用 户 提供 经 系统 测试 验收 通过 的 项 目 ; 

建立 相应 项 目的 缺陷 库 , 用 于 系统 测试 阶段 项 目 不 同 生命 周期 的 缺陷 记录 和 缺陷 
定期 对 系统 测试 活动 及 结果 进行 评估 ,向 各 事业 部 经 理 / 项 目 办 总 监 /项 目 经 理 汇 
报 项 目的 产品 质量 信息 及 数据 。 


系统 测试 的 设计 


为 了 保证 系统 测试 质量 ,必须 在 测试 设计 阶段 就 对 系统 进行 严密 的 测试 设计 。 这 就 
需要 在 测试 设计 中 ,从 多 方面 考虑 系统 规格 的 实现 情况 。 通 常 需要 从 以 下 几 个 层次 来 进 
行 设计 : 用 户 层 、 应 用 层 、 功 能 层 、 子 系统 层 \ 协 议 / 指 标 层 。 


6. 


用 户 层 : 主要 是 面向 产品 最 终 的 使 用 操作 者 的 测试 。 这 里 重点 突出 的 是 站 在 操 
作者 角度 上 ,测试 系统 对 用 户 支 持 的 情况 ,用 户 界面 的 规范 性 、 友 好 性 、 可 操作 性 ， 
以 及 数据 的 安全 性 。 主 要 包括 : 用 户 支 持 测试 .用户 界面 测试 、 可 维护 性 测试 、 安 
全 性 测试 。 

应 用 层 : 针对 产品 工程 应 用 或 行业 应 用 的 测试 。 重 点 站 在 系统 应 用 的 角度 ,模拟 
实际 应 用 环境 ,对 系统 的 兼容 性 、 可 靠 性 ,性 能 等 进行 的 测试 。 主 要 有 : 系统 性 能 
测试 ,系统 可 靠 性 测试 ,系统 稳定 性 测试 ,系统 兼容 性 测试 .系统 组 网 测试 .系统 安 
装 升级 测试 。 

功能 层 : 针对 产品 具体 功能 实现 的 测试 。 主要 包括 : 业务 功能 的 覆盖 、 业 务 功能 
的 分 解 . 业 务 功能 的 组 合 . 业 务 功 能 的 冲突 。 

子 系统 层 : 针对 产品 内 部 结构 性 能 的 测试 。 关 注 子 系统 内 部 的 性 能 ,模块 间接 口 的 
瓶颈 。 主 要 内 容 : 单个 子 系统 的 性 能 、 子 系统 间 的 接口 瓶颈 、 子 系统 间 的 相互 影响 。 
协议 /指标 层 : 针对 系统 支持 的 协议 、 指 标的 测试 。 测 试 内 容 : 协议 一 致 性 测试 、 
协议 互通 测试 。 

几 种 常见 的 系统 测试 方法 


(1) 恢复 测试 

恢复 测试 也 叫 容错 测试 ,用 来 检查 系统 的 容错 能 力 。 通 常 若 计算 机 系统 出 现 错误 ,就 
必须 在 一 定时 间 内 从 错误 中 恢复 过 来 ,修正 错误 并 重新 启动 系统 。 

恢复 测试 是 通过 各 种 手段 ,让 软件 强制 性 地 出 错 ,使 其 不 能 正常 工作 ,从 而 检验 系统 
的 恢复 能 力 。 对 于 自动 恢复 系统 , 即 由 系统 自身 完成 恢复 工作 , 则 应 该 检验 重新 初始 化 、 
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检查 点 ,数据 恢复 和 重新 启动 等 机 制 的 正确 性 。 对 于 人 工 干预 恢复 系统 ,要 评估 平均 修复 
时 间 是 否 在 可 接受 的 范围 。 

(2) 安全 测试 

安全 测试 的 目的 在 于 检查 系统 对 外 界 非 法 入 侵 的 防范 能 力 。 在 安全 测试 过 程 中 , 测 
试 者 扮演 着 非法 入 侵 者 ,采用 各 种 手段 试图 突破 防线 ,攻击 系统 。 例 如 ,测试 者 可 以 尝试 
通过 外 部 的 手段 来 破译 系统 的 密码 ,或 者 可 以 有 目的 地 引发 系统 错误 ,试图 在 系统 恢复 过 
程 中 侵入 系统 等 。 

系统 的 安全 测试 要 设置 一 些 测试 用 例 试图 突破 系统 的 安全 保密 防线 ,用 来 查找 系统 
的 安全 保密 的 漏洞 。 

系统 安全 测试 的 准则 是 让 非法 侵入 者 攻击 系统 的 代价 大 于 保护 系统 安全 的 价值 。 

(3) 强度 测试 

强度 测试 也 称 压 力 测试 .负载 测试 。 强 度 测 试 是 要 破坏 程序 ,检测 非 正 常 的 情况 系统 
的 负载 能 力 。 强 度 测 试 模拟 实际 情况 下 的 软 硬 件 环 境 和 用 户 使 用 过 程 的 系统 负荷 ,长 时 
间或 超 负荷 地 运行 测试 软件 来 测试 系统 ,以 检验 系统 能 力 的 最 高 限度 ,从 而 了 解 系统 的 可 
靠 性 .稳定 性 等 。 例 如 ,将 输入 的 数据 值 提高 一 个 或 几 个 数量 级 来 测试 输入 功能 的 响 

实际 上 ,强度 测试 就 是 在 一 些 特定 情况 下 所 做 的 敏感 测试 。 比 如 数学 算法 中 ,在 一 个 
有 效 的 数据 范围 内 定义 一 个 极 小 范围 的 数据 区 间 ,这 个 数据 区 间 中 的 数据 本 应 该 是 合理 
的 ,但 往往 又 可 能 会 引发 异常 的 状况 或 是 引起 错误 的 运行 ,导致 程序 的 不 稳定 性 。 敏 感 测 
试 就 是 为 了 发 现 这 种 在 有 效 的 输入 数据 区 域内 可 能 会 引发 不 稳定 性 或 者 引起 错误 运行 的 
数据 集合 和 组 合 。 

(4) 性 能 测试 

性 能 测试 用 来 测试 软件 在 系统 运行 时 的 性 能 表现 ,比如 运行 速度 .系统 资源 占有 或 响 
应 时 间 等 情况 。 对 于 实时 系统 或 戏 入 式 系统 , 若 只 能 满足 功能 需求 而 不 能 满足 性 能 需求 ， 
是 不 能 被 接受 的 。 

性 能 测试 可 以 在 测试 过 程 的 任意 阶段 进行 ,例如 ,在 单元 层 , 一 个 独立 的 模块 也 可 以 
运用 白 盒 测试 方法 进行 性 能 评估 。 但 是 ,只 有 当 一 个 系统 的 所 有 部 分 都 集成 后 ,才能 检测 
此 系统 的 真正 性 能 。 

(5) 容量 测试 

容量 测试 是 指 在 系统 正常 运行 的 范围 内 测定 系统 能 够 处 理 的 数据 容量 ,测试 系统 承 
受 超额 数据 容量 的 能 力 。 系 统 容 量 必须 满足 用 户 需求 ,如 果 不 能 满足 实际 要 求 ,必须 努力 
改进 ,寻求 解决 办 法 。 暂 时 无 法 解决 的 需要 在 产品 说 明 书 中 给 予 说 明 。 

(6) 正确 性 测试 
正确 性 测试 是 为 了 检测 软件 的 各 项 功能 是 否 符合 产品 规格 说 明 的 要 求 。 软 件 的 正确 
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性 与 否 关系 着 软件 的 质量 好 坏 , 所 以 非常 重要 。 


正确 性 测试 的 总 体 思路 是 设计 一 些 逻 辑 正确 的 输入 值 ,检查 运行 结果 是 不 是 期 望 值 。 
正确 性 测试 主要 有 两 种 方法 ,一 种 是 枚 举 法 , 另 一 种 是 边界 值 法 。 

对 于 枚 举 法 ,其 特点 是 在 测试 时 应 尽量 设法 减少 枚 举 的 次 数 , 从 而 降低 测试 的 投入 成 
本 。 次 数 减少 的 关键 因素 就 是 正确 寻找 等 价 区 间 ,因为 在 等 价 区 间 里 ,只 要 随意 选取 一 个 
值 测试 一 次 就 可 以 了 。 

数学 定义 中 ,等 价 区 间 的 概念 如 下 : 若 (a,0) 是 命题 f(x) 的 一 个 等 价 区 间 , 在 (a,05) 
中 任意 取 zl 进行 测试 。 如 果 f(zx1) 错 误 , 那 么 f(x) 在 整个 (a,5) 区 间 都 将 出 错 ; 如 果 
f(zlD) 正 确 , 那 么 f(x) 在 整个 (a,b) 区 间 都 将 正确 。 

枚 举 法 需要 凭借 直觉 和 经 验 来 找到 等 价 区 间 ,在 程序 相当 复杂 的 情况 下 , 枚 举 测试 就 
显得 很 有 难度 。 

另 一 种 有 效 的 测试 方法 就 是 边界 值 测试 , 即 采 用 定义 域 或 者 等 价 区 间 的 边界 值 进行 
测试 。 因 为 程序 设计 人 员 很 容易 疏忽 边界 值 ,程序 也 最 容易 在 边界 值 上 出 问题 。 例 如 , 测 
试 平方 根 函 数 的 一 段 程序 , 任 直 觉 输入 等 价 区 间 应 是 (0,1) 和 (1, 十 2)。 可 取 xz==0.5 以 
及 z+ 二 0.2 进行 等 价 测试 ,再 取 x=0 以 及 x 二 1 进行 边界 值 测试 。 

(7) 可 靠 性 测试 

可 靠 性 测试 是 从 验证 的 角度 出 发 ,检验 系统 的 可 靠 性 是 否 达 到 预期 的 目标 ,同时 给 出 
当前 系统 可 能 的 可 靠 性 增长 情况 。 可 靠 性 测试 需要 从 用 户 角 度 出 发 ,模拟 用 户 实际 使 用 
系统 的 情况 ,设计 出 系统 的 可 操作 视图 。 在 这 个 基础 上 ,根据 输入 空间 的 属性 以 及 依赖 关 
系 导出 测试 用 例 ,然后 在 仿真 的 环境 或 真实 的 环境 下 执行 测试 用 例 并 记录 测试 的 数据 。 

对 可 靠 性 测试 来 说 ,最 关键 的 是 测试 软件 系统 的 失效 间隔 时 间 、 失 效 修复 时 间 、 失 效 
数量 .失效 级 别 数据 等 。 根 据 获得 的 测试 数据 ,应 用 可 靠 性 模型 ,可 以 得 到 系统 的 失效 率 
以 及 可 靠 性 增长 趋势 。 

(8) 兼容 性 测试 

现今 ,客户 对 各 个 开发 商 和 各 种 软件 之 间 相 互 兼容 .共享 数据 的 能 力 要 求 越 来 越 高 ， 
所 以 对 于 软件 兼容 性 的 测试 就 非常 重要 。 

软件 兼容 性 测试 是 检测 各 软件 之 间 能 否 正常 地 交互 .共享 信息 ,能 否 正确 地 和 其 他 软 
件 合 作 完 成 数据 处 理 。 从 而 保障 软件 能 够 按照 客户 期 望 的 标准 进行 交互 ,多 个 软件 共同 
完成 指定 的 任务 。 

交互 可 以 在 运行 于 同一 台 计 算 机 上 的 两 个 程序 之 间 进 行 . 也 可 以 通过 因特网 ,在 远 距 
离 连 接 的 两 个 程序 间 进 行 。 交 互 也 可 以 简化 为 在 移动 存储 设备 上 保存 数据 ,再 在 其 他 计 
算 机 上 运行 。 

兼容 性 的 测试 通常 需要 解决 以 下 问题 : 新 开发 的 软件 需要 与 哪 种 操作 系统 、Web 浏 
览 器 和 应 用 软件 保持 兼容 ,如 果 要 测试 的 软件 是 一 个 平台 ,那么 要 求 应 用 程序 能 在 其 上 运 
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行 。 应 该 遵守 哪 种 定义 软件 之 间 交 互 的 标准 或 者 规范 。 软 件 使 用 何 种 数据 与 其 他 平台 、 
与 新 的 软件 进行 交互 和 共享 信息 。 

兼容 性 通常 有 以 下 几 种 : 

@ 向 前 兼容 与 向 后 兼容 。 向 前 兼容 是 指 可 以 使 用 软件 的 未 来 版 本 ,向 后 兼容 是 指 可 
以 使 用 软件 的 以 前 版 本 。 并 非 所 有 的 软件 都 能 够 向 前 兼容 和 向 后 兼容 。 

@ 不 同 版 本 间 的 兼容 。 实 现 测试 平台 和 应 用 软件 多 个 版 本 之 间 能 够 正常 工作 是 一 
项 困难 的 任务 。 例 如 ,现在 要 测试 一 个 流行 的 操作 系统 的 新 版 本 ,当前 的 操作 系统 可 能 包 
含 上 百 万 程序 ,新 操作 系统 要 求 与 之 百分之百 兼容 。 因 为 不 可 能 在 一 个 操作 系统 上 测试 
所 有 的 软件 程序 ,因此 需要 决定 哪些 是 最 重要 的 ,必须 要 进行 的 。 对 于 测试 新 的 应 用 软件 
程序 也 一 样 ,需要 决定 在 何 种 平台 上 进行 测试 ,与 什么 样 的 应 用 程序 一 起 测试 。 

@ 标准 和 规范 。 适 用 于 软件 平台 的 标准 和 规范 有 两 个 级 别 : 高 级 标准 和 低级 标准 。 

高 级 标准 是 产品 应 当 普 遍 遵 守 的 ,例如 ,软件 能 在 何 种 操作 系统 上 运行 ? 是 因特网 上 
的 程序 吗 ? 它 运行 于 何 种 浏览 器 ? 每 一 项 问题 都 关系 到 平台 ,假若 应 用 程序 声明 与 某 个 
平台 兼容 ,就 必须 遵守 关于 该 平台 的 标准 和 规范 。 例 如 “MS Windows” 是 微软 公司 的 认 
证 徽标 ,为 了 得 到 这 个 徽标 ,软件 必须 通过 独立 测试 实验 室 的 兼容 性 测试 ,其 日 的 就 是 确 
保 软件 在 Windows 操作 系统 上 能 平稳 可 靠 地 运行 。 

低级 标准 是 对 产品 开发 细节 的 描述 ,从 某 种 意义 上 说 ,低级 标准 比 高 级 标准 更 加 重 
要 。 假 如 创建 了 一 个 运行 在 Windows 之 上 的 程序 ,但 它 与 其 他 Windows 软件 在 界面 和 
操作 上 都 有 很 大 的 不 同 ,结果 是 它 不 会 获得 “MS Windows” 认 证 徽标 。 如 果 是 一 个 图 形 
软件 ,保存 的 文件 格式 却 不 符合 图 片 文 件 扩展 名 的 标准 ,用 户 就 无 法 在 其 他 程序 中 查看 该 
文件 。 软 件 与 标准 不 兼容 ,基本 上 将 较 快 地 被 淘汰 。 

同样 ,在 通信 协议 ,编程 语言 的 语法 以 及 用 于 共享 信息 的 任何 形式 都 必须 符合 公开 的 
标准 与 规范 。 

@ 数据 共享 兼容 。 应 用 程序 之 间 共 享 数据 增强 了 软件 功能 。 支 持 并 遵守 公开 的 标 
准 ,允许 用 户 与 其 他 软件 无 障碍 地 传输 数据 ,这 个 程序 就 是 一 个 兼容 性 好 的 产品 。 

在 Windows 环境 下 , 剪 切 ,复制 和 粘贴 是 程序 间 常 见 的 一 种 数据 共享 方式 。 在 此 状 
况 下 ,传输 通过 剪贴 板 的 程序 来 实现 。 剪 贴 板 设计 能 存放 各 种 不 同 的 数据 类 型 。 
Windows 中 常见 的 数据 类 型 包括 文本 、 图 片 和 声音 等 ,这 些 数据 类 型 可 以 有 各 种 格式 。 
若 对 某 个 程序 进行 兼容 性 测试 ,就 要 确认 其 数据 能 够 利用 剪贴 板 与 其 他 程序 进行 相互 复 
制 。 甚 后 有 大 量 的 代码 支持 这 一 兼容 特性 ,其 中 的 测试 工作 也 是 一 项 挑战 。 另 外 ,通常 我 
们 最 熟悉 的 数据 共享 方式 是 读 写 移 动 外 存 ,如 软磁盘 、U 盘 、 移 动 硬盘 等 ,但 文件 的 数据 
格式 必须 符合 标准 ,才能 在 多 台 计 算 机 上 保持 兼容 。 

(9) Web 网 站 测试 

Web 网 站 测试 是 面向 因特网 Web 页 面 的 测试 。 众 所 周知 ,因特网 网 页 是 由 文字 、 图 
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形 声音、 视频 和 超级 链接 等 组 成 的 文档 。 网 络 客户 端 用 户 通过 在 浏览 器 中 的 操作 ,搜索 
浏览 所 需要 的 信息 资源 。 

针对 Web 网 站 这 一 特定 类 型 软件 的 测试 ,包含 了 许多 测试 技术 ,如 功能 测试 .压力 / 
负载 测试 .配置 测试 ,兼容 性 测试 .安全 性 测试 等 。 黑 盒 测 试 . 白 盒 测试 .静态 测试 和 动态 


测试 都 有 可 能 被 采用 。 
通常 Web 网 站 测试 的 内 容 包含 以 下 方面 : 
。 功能 测试 ; 
。 性 能 测试 ; 
。 安全 性 测试 ; 


。 可 用 性 / 易 用 性 测试 ; 
。 配置 和 兼容 性 测试 ; 
。 数据 库 测 试 ; 
代码 合法 性 测试 ; 
。 完成 测试 。 
Web 网 站 测试 将 在 本 书 第 9 章 中 作 详 细 介绍 。 
2.2.6 验收 测试 


1. 验收 测试 的 定义 

验收 测试 (Acceptance Testing) 是 向 未 来 的 用 户 表 明 系 统 能 够 像 预定 要 求 的 那样 工 
作 。 通 过 综合 测试 之 后 ,软件 已 完全 组 装 起 来 ,接口 方面 的 错误 也 已 排除 ,软件 测试 的 最 
后 一 步 一 一 验收 测试 即 可 开始 。 验 收 测试 是 软件 产品 完成 了 功能 测试 和 系统 测试 之 后 ， 
在 产品 发 布 之 前 所 进行 的 软件 测试 活动 。 通 过 了 验收 测试 ,产品 正式 进入 发 布 阶段 。 


2. 验收 测试 的 内 容 

软件 验收 测试 应 完成 的 工作 内 容 如 下 : 要 明确 验收 项 目 ,规定 验收 测试 通过 的 标准 ; 
确定 测试 方法 ; 决定 验收 测试 的 组 织 机 构 和 可 利用 的 资源 ; 选 定 测试 结果 分 析 方 法 ; 指 
定 验 收 测试 计划 并 进行 评审 ; 设计 验收 测试 所 用 的 测试 用 例 ; 审查 验收 测试 的 准备 工 
作 ; 执行 验收 测试 ; 分 析 测 试 结果 ; 做 出 验收 结论 ,明确 通过 验收 或 不 通过 验收 ,给 出 测 
试 结果 。 

在 验收 测试 计划 当中 ,可 能 包括 的 检验 方面 有 以 下 几 种 : 

(1) 功能 测试 ,如 完整 的 工资 计算 过 程 。 

(2) 逆向 测试 ,如 检验 不 符合 要 求 数据 而 引起 出 错 的 恢复 能 力 。 

(3) 特殊 情况 ,如 极限 测试 .不 存在 的 路 径 测试 。 

(4) 文档 检查 。 

(5) 强度 检查 ,如 大 批量 的 数据 或 者 最 大 用 户 并 发 使 用 。 


~、 
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(6) 恢复 测试 ,如 硬件 故障 或 用 户 不 良 数据 引起 的 一 些 情况 。 
(7) 可 维护 性 的 评价 。 

(8) 用 户 操作 测试 ,如 启动 .退出 系统 等 。 

(9) 用 户 友 好 性 检验 。 

(10) 安全 测试 。 


3. 验收 测试 的 标准 

实现 软件 确认 要 通过 一 系列 黑 盒 测试 。 验 收 测试 同样 需要 制订 测试 计划 和 过 程 , 测 
试 计 划 应 规定 测试 的 种 类 和 测试 进度 ,测试 过 程 则 定义 一 些 特殊 的 测试 用 例 , 旨 在 说 明 软 
件 与 需求 是 否 一 致 。 无 论 是 计划 还 是 过 程 ,都 应 该 着 重 考虑 软件 是 否 满足 合同 规定 的 所 
有 功能 和 性 能 ,文档 资料 是 否 完整 .准确 , 人 机 界面 和 其 他 方面 (例如 ,可 移植 性 ,兼容 性 、 
错误 恢复 能 力 和 可 维护 性 等 ) 是 否 令 用 户 满意 。 

验收 测试 的 结果 有 两 种 可 能 ,一 种 是 功能 和 性 能 指标 满足 软件 需求 说 明 的 要 求 ,用户 
可 以 接受 ; 另 一 种 是 软件 不 满足 软件 需求 说 明 的 要 求 ,用 户 无 法 接受 。 如 果 项 目 进行 到 
这 个 阶段 才 发 现 有 严重 错误 和 偏差 一 般 很 难 在 预定 的 工期 内 改正 ,因此 必须 与 用 户 协商 ， 
寻求 一 个 妥善 解决 问题 的 方法 。 


4. 验收 测试 的 常用 策略 

选择 的 验收 测试 的 策略 通常 建立 在 合同 需求 .组 织 和 公司 标准 以 及 应 用 领域 的 基础 
上 。 实 施 验收 测试 的 常用 策略 有 三 种 ,下 面 简要 介绍 。 

(1) 正式 验收 测试 
正式 验收 测试 是 一 项 管理 严格 的 过 程 , 它 通常 是 系统 测试 的 延续 。 计 划 和 设计 这 些 
测试 的 周密 和 详细 程度 不 亚 于 系统 测试 。 选 择 的 测试 用 例 应 该 是 系统 测试 中 所 执行 测试 用 
例 的 子 集 。 不 要 偏离 所 选择 的 测试 用 例 方 向 ,这 一 点 很 重要 。 在 很 多 组 织 中 ,正式 验收 测试 
是 完全 自动 执行 的 。 对 于 系统 测试 ,活动 和 工件 是 一 样 的 。 在 某 些 组 织 中 ,开发 组 织 (或 其 
独立 的 测试 小 组 ) 与 最 终 用 户 组 织 的 代表 一 起 执行 验收 测试 。 在 其 他 组 织 中 ,验收 测试 则 完 
全 由 最 终 用 户 组 织 执行 ,或 者 由 最 终 用 户 组 织 选 择 人 员 组 成 一 个 客观 公正 的 小 组 来 执行 。 
正式 验收 测试 的 优点 是 要 测试 的 功能 和 特性 都 是 明确 的 ; 测试 的 细节 是 已 知 的 并 且 
可 以 对 其 进行 评测 ; 测试 可 以 自动 执行 ,支持 回归 测试 ; 可 以 对 测试 过 程 进行 评测 和 监 
测 ; 可 接受 性 标准 是 已 知 的 。 

当然 ,正式 验收 测试 也 有 缺点 ,主要 有 : 测试 要 求 大 量 的 资源 和 计划 ,而 且 这 些 测试 
可 能 是 系统 测试 的 再 次 实施 ,也 可 能 无 法 发 现 软件 中 由 于 主观 原因 造成 的 缺陷 ,这 是 因为 
只 查找 了 预期 要 发 现 的 缺陷 。 

(2) 非 正 式 验收 或 Alpha 测试 

在 非 正 式 验收 测试 中 ,执行 测试 过 程 的 限定 不 像 正 式 验收 测试 中 那样 严格 。 在 此 测 
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试 中 ,确定 并 记录 要 研究 的 功能 和 业务 任务 .但 没有 可 以 遵循 的 特定 测试 用 例 。 测 试 内 容 
由 各 测试 员 决 定 。 这 种 验收 测试 方法 不 像 正 式 验收 测试 那样 组 织 有 序 , 而 且 更 为 主观 。 
大 多 数 情 况 下 , 非 正 式 验 收 测试 是 由 最 终 用 户 组 织 执行 的 。 

非 正 式 验收 测试 的 优点 是 : 要 测试 的 功能 和 特性 都 是 已 知 的 ; 可 以 对 测试 过 程 进 行 
评审 和 监测 ; 可 接受 性 标准 是 已 知 的 ; 非 正 式 验 收 测试 和 正式 验收 测试 相 比 ,可 以 发 现 
更 多 由 于 主观 原因 造成 的 缺陷 。 

非 正 式 验收 测试 的 缺点 包括 : 要 求 资 源 .计划 和 管理 资源 ; 无 法 控制 所 使 用 的 测试 
用 例 ; 最 终 用 户 可 能 沿用 系统 工作 的 方式 ,并 可 能 无 法 发 现 缺陷 ; 最 终 用 户 可 能 更 专注 
于 比较 新 系统 与 遗留 系统 ,而 不 是 专注 于 查找 缺陷 ; 用 于 验收 测试 的 资源 不 受 项 目的 控 
制 ,并 且 可 能 受到 压缩 。 

(3) Beta 测试 

与 以 上 两 种 验收 测试 策略 相 比 ,Beta 测试 需要 的 控制 是 最 少 的 。 在 Beta 测试 中 , 采 
用 的 细节 多 少 ,数据 和 方法 完全 由 各 测试 员 决 定 。 各 测试 员 负 责 创建 自己 的 环境 、 选 择 数 
据 , 并 决定 要 研究 的 功能 、 特 性 或 任务 。 各 测试 员 负 责 确定 自己 对 于 系统 当前 状态 的 接受 
标准 。Beta 测试 由 最 终 用 户 实施 ,通常 开发 组 织 对 其 管理 很 少 或 不 进行 管理 。Beta 测试 
是 所 有 验收 测试 策略 中 最 主观 的 。 

Beta 测试 形式 的 优点 是 : 测试 由 最 终 用 户 实施 ; 大 量 的 潜在 测试 资源 ; 提高 客户 对 
参与 人 员 的 满意 程度 ; 与 正式 或 非 正 式 验收 测试 相 比 ,可 以 发 现 更 多 由 于 主观 原因 造成 
的 缺陷 。 

Beta 测试 的 缺点 包括 : 未 对 所 有 功能 /特性 测试 ; 测试 流程 难以 评测 ; 最 终 用户 可 
能 沿用 系统 工作 的 方式 ,并 可 能 没有 发 现 或 没有 报告 缺陷 ; 最 终 用 户 可 能 更 专注 于 比 
较 新 的 系统 与 遗留 系统 ,而 不 是 专注 于 查找 缺陷 ; 用 于 验收 测试 的 资源 不 受 项 目的 控 
制 ,并 且 可 能 受到 压缩 ; 可 接受 性 标准 是 未 知 的 ; 需要 更 多 辅助 性 资源 来 管理 Beta 测 
试 员 。 


5. 验收 测试 的 过 程 

验收 测试 的 工作 流程 如 图 2-12 所 示 ,主要 步骤 如 下 : 

。 验收 测试 的 项 目 洽 谈 。 

。 验收 测试 合同 。 

。 提交 测试 样品 及 机 关 资 料 。 

(1) 软件 需求 分 析 : 要 分 析 测 试 样品 及 其 相关 资料 ,要 了 解 软 件 功能 和 性 能 要 求 、 软 
硬件 环境 要 求 等 ,并 特别 要 了 解 软件 的 质量 要 求 和 验收 要 求 。 综 合 分 析 产 品 是 否 达到 验 
收 测试 状态 ,未 达到 验收 测试 状态 ,要 返回 提交 测试 样品 及 相关 资料 ; 达到 测试 状态 , 则 
可 向 下 执行 。 
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验收 测试 的 
项 目 洽谈 


验收 测试 合同 


RY 


提交 测试 样品 | 未 汰 利 j N 
及 相关 资料 一 未 达到 测试 状态 


| 
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编制 验收 测试 计划 Ke。 达到 测试 状态 


和 项 目 验 收 准 则 整改 所 提交 材料 
进行 项 目 相关 
知识 培训 
A 
测试 设计 
(编制 测试 方案 ) 
i .LN L_， i 编制 验收 测试 报 
测试 方案 评审 ”于 测试 环境 搭建 。” 户 实施 测试 | 告 并 组 织 评审 
提交 验收 
测试 报告 


图 2-12 验收 测试 的 工作 流程 


(2) 编制 (验收 测试 计划 》 和 《项 目 验收 准则 》: 测试 计划 在 需求 分 析 阶 段 建立 ,根据 
软件 需求 和 验收 要 求 编制 测试 计划 ,制定 需 测试 的 测试 项 ,制定 测试 策略 及 验收 通过 准 
则 ,并 经 过 客户 参与 相关 计划 的 评审 。 

(3) 进行 项 目 相关 知识 培训 。 

(4) 测试 设计 和 测试 用 例 设 计 : 根据 (验收 测试 计划 》 和 《项 目 验 收 准则 》 编 制 测试 用 
例 和 相关 方案 。 

(5) 测试 方案 评审 : 评审 测试 实施 方案 和 相关 测试 用 例 。 
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(6) 测试 环境 搭建 : 建立 测试 的 硬件 环境 、 软 件 环境 等 (可 在 委托 客户 提供 的 环境 中 
进行 测试 ) 。 

(7) 实施 测试 : 进行 验收 测试 并 记录 测试 结果 。 

(8) 编制 验收 测试 报告 并 组 织 评审 : 根据 验收 通过 准则 分 析 测试 结果 ,做 出 验收 是 
否 通过 及 测试 评价 。 

(9) 提交 验收 测试 报告 : 根据 测试 结果 编制 缺陷 报告 和 验收 测试 报告 ,并 提交 给 
客户 。 


6. 验收 测试 的 总 体 思路 
用 户 验 收 测试 是 软件 开发 结束 后 ,用 户 对 软件 产品 投入 实际 应 用 以 前 进行 的 最 后 
一 次 质量 检验 活动 。 它 要 回答 开发 的 软件 产品 是 否 符合 预期 的 各 项 要 求 ,以 及 用 户 能 否 
接受 的 问题 。 由 于 它 不 只 是 检验 软件 某 个 方面 的 质量 ,而 是 要 进行 全 面 的 质量 检验 ,并 且 
要 决定 软件 是 否 合格 ,因此 验收 测试 是 一 项 严格 的 正式 测试 活动 。 
用 户 验 收 测试 可 以 分 为 两 个 大 的 部 分 : 软件 配置 审核 和 可 执行 程序 测试 。 其 大 致 顺 
序 可 分 为 : 文档 审核 , 源 代码 审核 ,配置 脚本 审核 ,测试 程序 或 脚本 审核 ,可 执行 程序 
测试 。 
(1) 软件 配置 审核 
对 于 一 个 外 包 的 软件 项 目 而 言 ,软件 承包 方 通常 要 提供 如 下 相关 的 软件 配置 内 容 ， 
。 可 执行 程序 , 源 程 序 、 配 置 脚本 ,测试 程序 或 脚本 ; 
。 主要 的 开发 类 文档 :《 需 求 分 析 说 明 书 》《 概 要 设计 说 明 书 》《 详 细 设 计 说 明 书 》、 
《数据 库 设计 说 明 书 》《 测 试 计 划 》《 测 试 报告 》《 程 序 维护 手册 》《 程 序 员 开 发 手 
册 》《 用 户 操 作 手册 》《 项 目 总 结 报告 》; 

。 主要 的 管理 类 文档 :《 项 目 计划 书 》《 质 量 控制 计划 》《 配 置 管理 计划 》《 用 户 培 
训 计划 》《 质 量 总 结 报告 《评审 报告 《会 议 记录 》《 开 发 进度 月 报 》。 

不 论 项 目 大 小 ,都 必须 具备 上 述 的 文档 内 容 , 只 是 可 以 根据 实际 情况 进行 重新 组 织 。 
审核 要 达到 的 基本 目标 是 : 根据 共同 制定 的 审核 表 , 尽 可 能 地 发 现 被 审核 内 容 中 存在 的 
问题 ,并 最 终 得 到 解决 。 在 根据 相应 的 审核 表 进 行文 档 审核 和 源 代码 审核 时 ,还 要 注意 文 
档 与 源 代码 的 一 致 性 。 

在 实际 的 验收 测试 执行 过 程 中 ,常常 会 发 现 文档 审核 是 最 难 的 工作 ,一 方面 由 于 市 场 
需求 等 方面 的 压力 使 这 项 工作 常常 被 弱化 或 推迟 ,造成 持续 时 间 变 长 ,加 大 文档 审核 的 难 
度 ; 另 一 方面 ,文档 审核 中 不 易 把 握 的 地 方 非常 多 ,每 个 项 目 都 有 一 些 特别 的 地 方 ,而 且 
也 很 难 找到 可 用 的 参考 资料 。 

(2) 可 执行 程序 的 测试 

当 文档 审核 . 源 代码 审核 .配置 脚本 审核 .测试 程序 或 脚本 审核 都 顺利 完成 后 ,就 可 以 
进行 验收 测试 的 最 后 一 个 步骤 一 一 可 执行 程序 的 测试 , 它 包 括 功能 、 性 能 等 方面 的 测试 ， 


了 
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每 种 测试 都 包括 目标 、 启 动 标准 、 活 动 、 完 成 标准 和 度量 五 部 分 。 
在 真正 进行 用 户 验 收 测试 之 前 一 般 已 经 完成 了 以 下 工作 (也 可 以 根据 实际 情况 选取 
或 增加 ): 


软件 开发 已 经 完成 ,并 全 部 解决 了 已 知 的 软件 缺陷 ; 

验收 测试 计划 已 经 过 评审 并 批准 ,并 且 置 于 文档 控制 之 下 ; 
对 软件 需求 说 明 书 的 审查 已 经 完成 ; 

对 概要 设计 ,详细 设计 的 审查 已 经 完成 ; 

对 所 有 关键 模块 的 代码 审查 已 经 完成 ; 

对 单元 集成、 系统 测试 计划 和 报告 的 审查 已 经 完成 ; 

所 有 的 测试 脚本 已 完成 ,并 至 少 执 行 过 一 次 , 且 通 过 评审 ; 
使 用 配置 管理 工具 且 代 码 置 于 配置 控制 之 下 ; 

软件 问题 处 理 流程 已 经 就 绪 ; 

已 经 制定 、 评 审 并 批准 验收 测试 完成 标准 。 


具体 的 测试 内 容 通常 包括 : 


. 


安装 (升级 ); 

启动 与 关机 ; 

功能 测试 ( 正 例 、 重 要 算法 、 边 界 、 时 序 \ 反 例 、 错 误 处 理 ); 

性 能 测试 (正常 的 负载 ,容量 变化 ); 

压力 测试 (临界 的 负载 .容量 变化 ); 

配置 测试 ; 

平台 测试 ; 

安全 性 测试 ; 

恢复 测试 (在 出 现 掉 电 、 硬 件 故障 或 切换 、 网 络 故 障 等 情况 时 ,系统 是 否 能 够 正常 
运行 ); 
可 靠 性 测试 ; 

性 能 测试 和 压力 测试 。 


一 般 情 况 下 性 能 测试 和 压力 测试 二 者 在 一 起 进行 ,通常 还 需要 辅助 工具 的 支持 。 在 
进行 性 能 测试 和 压力 测试 时 ,测试 范围 必须 限定 在 那些 使 用 频 度 高 和 时 间 要 求 苛刻 的 软 
件 功能 子 集中 。 由 于 开发 方 已 经 事先 进行 过 性 能 测试 和 压力 测试 ,因此 可 以 直接 使 用 开 
发 方 的 辅助 工具 。 也 可 以 通过 购买 或 自己 开发 来 获得 辅助 工具 。 如 果 执 行 了 所 有 的 测试 
案例 ,测试 程序 或 脚本 ,用 户 验收 测试 中 发 现 的 所 有 软件 问题 都 已 解决 ,而 且 所 有 的 软件 
配置 均 已 更 新 和 审核 ,可 以 反映 出 软件 在 用 户 验收 测试 中 所 发 生 的 变化 ,用 户 验收 测试 就 
完成 了 。 
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2.3 静态 测试 与 动态 测试 


根据 程序 是 否 运行 可 以 把 软件 测试 方法 分 为 静态 测试 (Static Testing) 和 动态 测试 
(Dynamic Testing) 两 大 类 。 图 2-13 是 静态 测试 与 动态 测试 的 比喻 图 。 


踩 油门 

看 车 漆 
打开 前 盖 检 查 
发 动 汽车 
mmr | 
上 路 行使 


图 2-13 静态 测试 与 动态 测试 的 比喻 图 


静态 测试 


2.3.1 静态 测试 

静态 方法 的 主要 特征 是 在 用 计算 机 测试 源 程序 时 ,计算 机 并 不 真正 运行 被 测试 的 程 
序 , 只 对 被 测 程序 进行 特性 分 析 。 因 此 ,静态 方法 常 称 为 “分 析 ”, 静 态 分 析 是 对 被 测 程序 
进行 特性 分 析 的 一 些 方法 的 总 称 。 所 谓 静 态 分析 ,就 是 不 需要 执行 所 测试 的 程序 ,而 只 是 
通过 扫描 程序 正文 ,对 程序 的 数据 流 和 控制 流 等 信息 进行 分 析 , 找 出 系统 的 缺陷 ,得 出 测 
试 报告 。 

为 什么 要 进行 静态 分 析 呢 ? 首先 ,一 个 软件 产品 可 能 实现 了 所 要 求 的 功能 ,但 如 果 它 
的 内 部 结构 组 织 得 很 复杂 ,很 混乱 ,代码 的 编写 也 没有 规范 ,这 时 软件 中 往往 会 隐藏 一 些 
不 易 被 察觉 的 错误 。 其 次 ,即使 这 个 软件 基本 满足 了 用 户 目前 的 要 求 , 但 到 了 日 后 对 该 产 
品 进 行 维护 升级 工作 的 时 候 , 会 发 现 维护 工作 相当 困难 。 所 以 ,如 果 能 对 软件 进行 科学 、 
细致 的 静态 分 析 , 使 系统 的 设计 符合 模块 化 ,结构 化 ,面向 对 象 的 要 求 , 使 开发 人 员 编 写 的 
代码 符合 规定 的 编码 规范 ,就 能 够 避免 软件 中 大 部 分 的 错误 ,同时 为 日 后 的 维护 工作 节约 
大 量 的 人 力 物力。 这 就 是 对 软件 进行 静态 分 析 的 价值 所 在 。 

静态 测试 包括 代码 检查 .静态 结构 分 析 、 代 码 质 量度 量 等 。 它 可 以 由 人 工 进行 ,充分 
发 挥 人 的 逻辑 思维 优势 ,也 可 以 借助 软件 工具 自动 进行 。 

通常 在 静态 测试 阶段 进行 以 下 一 些 测试 活动 : 

。 检查 算法 的 逻辑 正确 性 ,确定 算法 是 否 实现 了 所 要 求 的 功能 。 

"。 检查 模块 接口 的 正确 性 ,确定 形 参 的 个 数 、. 数 据 类 型 ,顺序 是 否 正确 ,确定 返回 值 

类 型 及 返回 值 的 正确 性 。 
”检查 输入 参数 是 否 有 合法 性 检查 。 如 果 没 有 合法 性 检查 , 则 应 确定 该 参数 是 否 不 
需要 合法 性 检查 ,否则 应 加 上 参数 的 合法 性 检查 。 
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。 检查 调用 其 他 模块 的 接口 是 否 正确 ,检查 实 参 类 型 . 实 参 个 数 是 否 正确 ,返回 值 是 
否 正确 。 若 被 调用 模块 出 现 异 常 或 错误 ,程序 是 否 有 适当 的 出 错 处 理 代 码 。 

。 检查 是 否 设置 了 适当 的 出 错 处 理 , 以 便 在 程序 出 错时 ,能 对 出 错 部 分 进行 重新 安 
排 ,保证 其 逻辑 的 正确 性 。 

。 检查 表达 式 ,语句 是 否 正确 ,是 否 含有 二 义 性 。 例如 ,下 列表 达 式 或 运算 符 的 优先 
级 ,; 二 = 一、 这 = 二、& 有 &、|| ,十 十 ,一 一 等 。 

。 检查 常量 或 全 局 变量 使 用 是 否 正确 。 

。 检查 标识 符 的 使 用 是 否 规 范 、 一 致 ,变量 命名 是 否 能 够 望 名 知 义 、 简 洁 、 规 范 和 
易 记 。 

。 检查 程序 风格 的 一 致 性 ,规范 性 ,代码 是 否 符 合 行业 规范 ,是 否 所 有 模块 的 代码 风 
格 一 致 .规范 。 

。 检查 代码 是 否 可 以 优化 ,算法 效率 是 否 最 高 。 

。 检查 代码 注释 是 否 完整 ,是 否 正确 反映 了 代码 的 功能 ,并 查找 错误 的 注释 。 

静态 分 析 的 差错 分 析 功 能 是 编译 程序 所 不 能 替代 的 。 编 译 系统 虽然 能 发 现 某 些 程序 

错误 ,但 这 些 错 误 远 非 软 件 中 存在 的 大 部 分 错误 。 目 前 ,已 经 开发 了 一 些 静 态 分 析 系统 作 
为 软件 静态 测试 的 工具 ,静态 分 析 已 被 当做 一 种 自动 化 的 代码 校 验 方法 。 

静态 测试 可 以 完成 的 工作 如 下 : 

(1) 可 以 发 现 如 下 的 程序 缺陷 

。 错 用 了 局 部 变量 和 全 局 变量 ， 

。 不 匹配 的 参数 ; 

。 未 定义 的 变量 ; 

。 不 适当 的 循环 垦 套 或 分 支 举 套 ; 

。 无 终止 的 死 循 环 ; 

。 不 允许 的 递归 ，; 

。 调用 不 存在 的 子 程 序 ; 

。 遗漏 了 标号 或 代码 。 

(2) 找 出 如 下 间 题 的 根源 

。 未 使 用 过 的 变量 ; 

。 不 会 执行 到 的 代码 ; 

。 从 未 引用 过 的 标号 ; 

。 潜在 的 死 循 环 。 

(3) 提供 程序 缺陷 的 如 下 间接 信息 

。 标识 符 的 使 用 方式 ; 

。 过 程 的 调用 层次 ; 
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。 所 用 变量 和 常量 的 交 又 应 用 表 ; 

。 是 否 违背 编码 规则 。 

(4) 为 进一步 查 错 做 准备 

(5) 选择 测试 用 例 

(6) 进行 符号 测试 

实践 表明 ,使 用 静态 测试 可 发 现 大 约 1/3 一 2/3 的 逻辑 设计 和 编码 错误 。 但 代码 中 仍 
会 隐藏 许多 故障 无 法 通过 静态 测试 来 发 现 ,因此 必须 通过 动态 测试 进行 详细 分 析 。 
2.3.2 动态 测试 

动态 方法 是 通过 源 程序 运行 时 所 体现 出 来 的 特征 ,来 进行 执行 跟踪 、 时 间 分 析 以 及 测 
试 覆 盖 等 方面 的 测试 。 动 态 测试 是 真正 运行 被 测 程序 ,在 执行 过 程 中 ,通过 输入 有 效 的 测 
试用 例 , 对 其 输入 与 输出 的 对 应 关系 进行 分 析 ,以 达到 检测 的 目的 。 

动态 测试 方法 的 基本 步 又， 

(1) 选取 定义 域 的 有 效 值 , 或 选取 定义 域外 的 无 效 值 ; 

(2) 对 已 选取 值 决 定 预期 的 结果 ; 

(3) 用 选取 值 执行 程序 ; 

(4) 执行 结果 与 预期 的 结果 相 比 ,不 吻合 则 证 明 程 序 有 错 。 

不 同 的 测试 方法 各 自 的 目标 和 侧重 点 不 一 样 ,在 实际 工作 中 要 将 静态 测试 和 动态 测 
试 结合 起 来 ,以 达到 更 加 完美 的 效果 。 

在 动态 测试 运行 中 ,又 可 有 基于 程序 结构 的 白 盒 测试 (或 称 为 覆盖 测试 ) 和 基于 功能 
的 黑 盒 测试 。 


2.4 黑 盒 测试 与 白 念 测试 


测试 用 例 的 设计 是 测试 过 程 的 一 个 关键 步骤 ,按照 测试 用 例 的 不 同 出 发 点 ,可 以 分 为 黑 
盒 测 试 与 白 盒 测试 。 一 般 来 讲 , 在 进行 单元 测试 时 采用 和 白 盒 测 试 , 而 其 余 测试 采用 黑 盒 测试 。 
2.4.1 黑 盒 测试 

黑 盒 测试 (Black-Box Testing) 又 称 为 功能 测试 .数据 驱动 测试 和 基于 规格 说 明 的 测 
试 ,是 一 种 从 用 户 观 点 出 发 的 测试 。 
黑 盒 测试 的 基本 观点 是 : 任何 程序 都 可 以 看 作 是 从 输入 定义 域 映射 到 输出 值 域 的 函 
数 过 程 , 被 测 程序 被 认为 是 一 个 打 不 开 的 黑 盒 子 , 黑 盒 中 的 内 容 ( 实 现 过 程 ) 完 全 不 知道 ， 
只 明确 要 做 到 什么 。 黑 盒 测 试 作为 软件 功能 的 测试 手段 .是 重要 的 测试 方法 。 它 主要 根 
据 规格 说 明 设 计 测试 用 例 ,并 不 涉及 程序 内 部 结构 和 内 部 特性 ,只 依靠 被 测 程序 输入 和 输 
出 之 间 的 关系 或 程序 的 功能 设计 测试 用 例 。 
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黑 盒 测试 有 两 个 显著 的 特点 : 

(1) 黑 盒 测试 不 考虑 软件 的 具体 实现 过 程 , 当 软 件 实现 的 过 程 发 生变 化 时 ,测试 用 例 
仍然 可 以 使 用 ; 

(2) 黑 盒 测试 用 例 的 设计 可 以 和 软件 实现 同时 进行 ,这 样 能 够 压缩 总 的 开发 时 间 。 

黑 盒 测试 不 仅 能 够 找到 大 多 数 其 他 测试 方法 无 法 发 现 的 错误 ,而且 一 些 外 购 软件 、 参 数 
化 软件 包 以 及 某 些 自动 生成 的 软件 ,由 于 无 法 得 到 源 程序 ,在 一 些 情 况 下 只 能 选择 黑 盒 测试 。 

但 是 任何 一 个 软件 作为 一 个 系统 都 是 有 层次 的 ,在 软件 的 总 体 功能 之 下 可 能 具有 若 
干 个 层次 的 功能 ,而 且 软 件 开发 一 般 总 是 将 原始 问题 换算 成 计算 机 能 够 处 理 的 形式 作为 
开始 , 接 下 来 进行 一 系列 变换 ,最 后 得 到 程序 编程 。 在 这 一 系列 变换 的 过 程 之 中 ,每 一 步 
都 得 到 不 同形 式 的 中 间 成 果 , 再 生成 相应 功能 。 因 此 ,测试 人 员 常 常 面临 的 一 个 实际 问题 
是 在 哪个 层次 上 进行 测试 。 假 如 是 在 高 一 层次 上 进行 的 测试 ,就 可 能 忽略 一 些 细节 ,测试 
可 能 是 不 完全 的 和 不 够 充分 的 ; 假如 是 在 较 低 一 层次 上 进行 的 测试 , 则 有 可 能 忽略 各 功 
能 存在 的 相互 作用 和 相互 依赖 的 关系 。 

如 果 想 用 黑 盒 测试 发 现 程序 中 所 有 的 错误 ,就 必须 输入 数据 的 所 有 可 能 的 值 来 检查 
程序 是 否 都 能 够 产生 正确 的 结果 。 但 这 显然 是 做 不 到 的 。 一 方面 ,输入 和 输出 结果 是 否 
正确 本 身 无 法 全 部 事先 知道 ; 另 一 方面 ,要 做 到 穷 举 所 有 可 能 的 输入 实际 上 很 困难 。 通 
常 黑 盒 测试 的 测试 数据 是 根据 规格 说 明 书 来 决定 的 ,但 实际 上 ,也 比较 难以 保证 规格 说 明 
书 是 不 是 完全 正确 ,可 能 也 存在 着 问题 。 例 如 ,如 果 规 格 说 明 书 中 规定 了 多 余 的 功能 ,或 
是 遗漏 了 某 些 功能 ,采用 黑 盒 测试 是 无 法 发 现 这些 问 题 的 。 

黑 盒 测试 的 具体 技术 方法 主要 包括 边界 值 分 析 法 .等 价 类 划分 法 .比较 测试 法 .因果 
图 法 ,决策 表 法 等 。 

黑 盒 测试 属于 穷 举 输入 测试 方法 ,只 有 把 所 有 可 能 的 输入 都 作为 测试 情况 来 使 用 , 才 
能 以 这 种 方法 查 出 程序 中 所 有 的 错误 。 

软件 测试 仅 局 限于 功能 测试 是 不 够 的 ,因此 不 仅 要 进行 黑 盒 测 试 ,还 需要 花费 很 大 的 
精力 进行 逻辑 (结构 ) 测 试 , 即 白 盒 测试 。 

2.4.2 白 盒 测试 

盒 测 试 (White-Box Testing) 也 称 作 结构 测试 或 逻辑 驱动 测试 , 它 是 知道 产品 的 内 
部 工作 过 程 ,可 通过 测试 来 检测 产品 内 部 动作 是 否 按照 规格 说 明 书 的 规定 正常 进行 。 按 
照 程序 内 部 的 结构 测试 程序 ,检验 程序 中 的 每 条 通路 是 否 都 能 按 预定 要 求 正确 工作 ,而 不 
考虑 它 的 功能 。 白 盒 测 试 的 主要 方法 有 逻辑 覆盖 .基本 路 径 测试 等 ,主要 用 于 软件 验证 。 

白 盒 测 试 是 全 面 了 解 程序 内 部 逻辑 结构 `. 对 所 有 逮 辑 路 径 进行 测试 。 白 盒 测 试 是 穷 
举 路 径 测 试 。 在 使 用 这 一 方案 时 ,测试 者 必须 检查 程序 的 内 部 结构 ,从 检查 程序 的 逻辑 着 
手 , 得 出 测试 数据 。 贯 穿 程序 的 独立 路 径 数 是 天 文 数字 。 但 即使 每 条 路 径 都 测试 了 仍然 
可 能 有 错误 。 第 一 , 穷 举 路 径 测试 决 不 能 查 出 程序 是 否 违反 了 设计 规范 , 即 程序 本 身 就 是 
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个 错误 的 程序 。 第 二 , 穷 举 路 径 测 试 不 可 能 查 出 程序 中 因 遗 漏 路 径 而 出 错 。 第 三 , 穷 举 路 
径 测 试 可 能 发 现 不 了 一 些 与 数据 相关 的 错误 。 

白 盒 测 试 的 测试 规划 是 基于 产品 的 内 部 结构 来 进行 测试 ,检查 内 部 操作 是 否 按 规定 进 
行 ,软件 的 各 个 部 分 功能 是 否 得 到 充分 利用 。 白 盒 测试 又 称 结构 测试 或 基于 程序 的 测试 , 即 
逻辑 测试 。 白 盒 测试 将 被 测 程序 看 作 一 个 打开 的 盒子 ,测试 者 能 够 看 到 被 测 源 程序 ,可 以 分 
析 被 测 程序 的 内 部 结构 ,此 时 测试 的 焦点 集中 在 根据 其 内 部 结构 设计 测试 用 例 。 

既然 白 盒 测 试 是 根据 被 测 程序 的 内 部 结构 来 设计 测试 用 例 的 一 类 测试 ,也 许 有 人 会 
认为 ,只 要 保证 程序 中 所 有 的 路 径 都 执行 一 次 ,全 面 的 白 盒 测试 将 产生 “百分之百 正确 的 
程序 ”。 这 实际 上 是 不 可 能 的 ,即便 是 一 个 非常 小 的 控制 流程 ,进行 穷 举 测试 所 需要 的 时 
间 都 是 一 个 巨大 的 数字 。 

因此 , 白 盒 测试 要 求 对 某 些 程序 的 结构 特性 做 到 一 定 程度 的 覆盖 ,或 者 说 这 种 测试 是 
“基于 覆盖 率 的 测试 ”。 测 试 人 员 可 以 严格 定义 要 测试 的 确切 内 容 , 明 确 要 达到 的 测试 覆 
盖 率 ,减少 测试 的 过 分 和 盲目 并 以 此 为 目标 ,引导 测试 者 朝 着 提高 覆盖 率 的 方向 努力 , 找 
出 那些 可 能 已 被 忽视 的 程序 错误 。 

通常 的 程序 结构 覆盖 有 : 

。 语句 覆盖 ， 

。 判断 覆盖 ; 

。 条 件 覆 盖 ; 

。 判断 /条 件 覆 盖 ; 

。 条 件 组 合 覆 盖 ; 

。 路 径 覆 盖 

语句 覆盖 是 最 常见 也 是 最 弱 的 逻辑 覆盖 准则 , 它 要 求 设 计 若 干 个 测试 用 例 ,使 被 测 程 
序 的 每 个 语句 都 至 少 被 执行 一 次 。 判 定 履 盖 或 分 支 覆 盖 则 要 求 设计 若干 个 测试 用 例 , 使 
被 测 程序 的 每 个 判定 的 真 、 假 分 支 都 至 少 被 执行 一 次 。 但 判定 含有 多 个 条 件 时 ,可 以 要 求 
设计 若干 个 测试 用 例 , 使 被 测 程序 的 每 个 条 件 的 真 、 假 分 支 都 至 少 被 执行 一 次 , 即 条 件 覆 
盖 。 在 考虑 对 程序 路 径 进 行 全 面 检验 时 , 即 可 使 用 条 件 覆 盖 准 则 。 

虽然 结构 测试 提供 了 评价 测试 的 逻辑 覆盖 准则 ,但 结构 测试 是 不 完全 的 。 如 果 程 序 
结构 本 身 存 在 问题 ,比如 程序 逻辑 错 或 者 遗漏 了 规格 说 明 书 中 已 规定 的 功能 ,那么 ,无 论 
哪 种 结构 测试 ,即使 其 覆盖 率 达 到 了 百分之百 ,也 是 检查 不 出 来 的 。 因 此 ,提高 结构 测试 
的 覆盖 率 ,可 以 增强 对 被 测 软件 的 信 度 ,但 并 不 能 做 到 万 无 一 失 。 
2.4.3 黑 盒 测 试 与 白 盒 测试 的 对 比 
黑 盒 测试 法 和 白 盒 测试 法 是 从 完全 不 同 的 起 点 出 发 ,并 且 两 个 出 发 点 在 某 种 程度 上 
是 完全 不 同 的 ,这 反映 了 测试 思路 的 两 个 方面 。 两 类 方法 在 软件 测试 实践 过 程 中 均 被 证 
明 是 有 效 和 实用 的 方法 。 
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经 验 表明 ,在 进行 单元 测试 时 通常 采用 白 盒 测试 法 ; 而 在 集成 测试 .确认 测试 或 系统 
测试 时 常 采 用 黑 盒 测 试 法 。 
黑 盒 测试 是 以 用 户 的 观点 ,从 输入 数据 与 输出 数据 的 对 应 关系 ,也 就 是 根据 程序 外 部 特 
性 进行 的 测试 ,而 不 考虑 内 部 结构 及 工作 情况 ; 黑 盒 测 试 技术 注重 于 软件 的 信息 域 (范围 )， 
通过 划分 程序 的 输入 和 输出 域 来 确定 测试 用 例 ; 若 外 部 特性 本 身 存 在 问题 或 规格 说 明 的 规 
定 有 误 , 则 应 用 黑 盒 测 试 方法 是 不 能 发 现 问题 的 。 反 之 , 白 盒 测试 只 根据 程序 的 内 部 结构 进 
行 测试 ; 测试 用 例 的 设计 要 保证 测试 时 程序 的 所 有 语句 至 少 执行 一 次 ,而 且 要 检查 所 有 的 修 
辑 条 件 ; 如 果 程 序 的 结构 本 身 有 问题 ,比如 说 程序 逻辑 有 错误 或 者 有 遗漏 , 那 也 是 无 法 发 现 的 。 


小 结 


软件 测试 的 复杂 性 和 经 济 性 说 明 测 试 过 程 需 要 运用 多 种 策略 ,针对 不 同 的 被 测试 程 
序 状 况 选用 不 同 的 测试 方法 。 

通常 ,对 于 一 个 大 型 的 软件 系统 ,测试 流程 由 多 个 必 经 阶段 组 成 : 单元 测试 、 集 成 测 
试 .确认 测试 、 系 统 测试 和 验收 测试 。 

单元 测试 是 在 软件 测试 过 程 的 最 基础 级 别 的 测试 活动 ,目的 是 检测 程序 中 的 模块 无 
软件 故障 存在 。 

集成 测试 是 把 通过 单元 测试 的 各 模块 边 组 装 边 测试 ,来 检测 与 程序 接口 方面 的 故障 。 

确认 测试 是 按照 软件 需求 规格 说 明 来 验证 软件 产品 是 否 满足 需求 规格 的 要 求 。 

系统 测试 是 对 系统 中 各 个 组 成 部 分 进行 综合 测试 。 

验收 测试 是 验收 软件 产品 是 否 符合 预定 的 各 项 要 求 ,是 否 让 用 户 满意 。 

根据 程序 是 否 运行 ,可 以 把 软件 测试 方法 分 为 静态 测试 和 动态 测试 两 大 类 。 根 据 测 
试 步 又 的 不 同 出 发 点 ,可 以 分 为 黑 盒 测试 与 白 盒 测试 ,二 者 比较 见 表 2-1。 这 两 组 方法 可 
以 进行 某 种 形式 的 组 合 ,来 满足 测试 要 求 。 

表 2-1 黑 盒 测试 和 和 白 盒 测试 比较 


测试 法 oe 训 
性 能 黑 盒 测试 白 盒 测 试 
@ 适用 于 各 个 测试 阶段 可 构成 测试 数据 使 特定 程序 部 分 得 到 测试 
优点 @ 从 产品 功能 角度 进行 测试 @ 有 一 定 充分 性 度量 手段 
@ 容易 人手 生成 测试 数据 @ 可 获 较 多 工具 支持 
名 某 些 代 码 得 不 到 测试 @ 不 易 生 成 测试 数据 
缺点 @ 如 果 规 则 说 明 有 误 , 无 法 发 现 @ 无 法 对 未 实现 规格 说 明 的 部 分 进行 测试 
@ 不 易 进 行 充分 行 测试 @ 工作 量 大 ,通常 只 用 于 单元 测试 .有 应 用 局 限 性 
性 质 一 种 确认 技术 ,目的 是 确认 “设计 的 | 一 种 验证 技术 ,目的 是 验证 “系统 的 设计 是 否 
系统 是 否 正确 ” 正确 ” 
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本 章 概述 

黑 盒 测试 是 软件 测试 技术 中 最 基本 的 方法 之 一 ,在 各 类 测试 中 都 有 广泛 的 应 用 。 本 
章 将 介绍 黑 盒 测试 的 基本 概念 与 基本 方法 ,并 重点 介绍 应 用 较为 广泛 的 几 种 测试 方法 ， 
等 价 类 划分 法 .边界 值 分 析 法 .决策 表 法 和 因果 图 法 ,并 通过 典型 实例 详细 介绍 实际 测试 
技术 的 基本 运用 。 


3.1 黑 盒 测试 概述 


黑 盒 测试 又 称 为 功能 测试 或 数据 驱动 测试 ,是 从 用 户 观点 出 发 ,主要 以 软件 规格 说 明 
书 为 依据 ,对 程序 功能 和 程序 接口 进行 的 测试 。 

在 黑 盒 测 试 中 ,测试 条 件 主 要 是 基于 程序 或 者 系统 的 功能 。 例 如 ,测试 人 员 需 要 掌握 
有 关 输 入 数据 的 信息 并 观察 输出 数据 ,但 是 测试 人 员 并 不 知道 程序 到 底 是 如 何 工作 的 ,这 
就 好 比 一 个 人 虽然 会 开车 ,但 这 个 人 并 不 知道 汽车 的 内 部 工作 方式 。 在 这 里 ,运行 一 个 程 
序 并 不 需要 理解 其 内 部 结构 ,测试 人 员 只 是 根据 产品 应 该 实现 的 实际 功能 和 已 经 定义 好 
的 产品 规格 ,来 验证 产品 所 应 该 具有 的 功能 是 否 实现 ,每 个 功能 是 否 都 能 正常 使 用 ,是 否 
满足 用 户 的 要 求 。 在 测试 时 ,测试 人 员 将 整个 被 测试 的 程序 看 成 一 个 黑 盒子 ,在 完全 不 考 
虑 程序 或 者 系统 的 内 部 结构 和 内 部 特性 的 情况 下 ,检查 程序 的 功能 能 和 否 按照 需求 规格 说 
明 书 的 规定 正常 使 用 ,程序 是 否 能 适当 地 接收 输入 数据 而 产生 正确 的 输出 结果 。 
黑 盒 测试 是 以 用 户 的 观点 ,从 输入 数据 与 输出 数据 的 对 应 关系 出 发 进行 测试 的 , 它 不 
涉及 程序 的 内 部 结构 。 很 明显 ,如 果 外 部 特性 本 身 有 问题 或 规格 说 明 书 的 规定 有 误 ,用 黑 
盒 测 试 方法 是 发 现 不 了 的 。 黑 盒 测 试 方法 着 重 测试 软件 的 功能 需求 ,是 在 程序 接口 上 进 
行 测试 ,主要 是 为 了 发 现 以 下 错误 : 

(1) 是 否 有 不 正确 的 功能 ,是 否 有 遗漏 的 功能 ; 

(2) 在 接口 上 ,是 否 能 够 正确 地 接收 输入 数据 并 产生 正确 的 输出 结果 ; 
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(3) 是 否 有 数据 结构 错误 或 外 部 信息 访问 错误 ; 

(4) 性 能 上 是 否 能 够 满足 要 求 ; 

(5) 是 否 有 程序 初始 化 和 终止 方面 的 错误 。 

黑 盒 测试 有 两 种 基本 方法 , 即 通过 测试 和 失败 测试 。 

在 进行 通过 测试 时 ,实际 上 是 确认 软件 能 做 什么 ,而 不 会 去 考验 其 能 力 如 何 ,软件 测 
试 人 员 只 是 运用 最 简单 .最 直观 的 测试 案例 。 在 设计 和 执行 测试 案例 时 ,总 是 先 要 进行 通 
过 测试 ,验证 软件 的 基本 功能 是 否 都 已 实现 。 

在 确信 了 软件 正确 和 运行 之 后 ,就 可 以 采取 各 种 手段 通过 搞 垮 软件 来 找 出 缺陷 。 纯 粹 
为 了 破坏 软件 而 设计 和 执行 的 测试 案例 ,被 称 为 失败 测试 或 迫使 出 错 测试 。 

黑 盒 测试 的 一 个 主要 的 好 处 就 是 它 直接 针对 程序 或 者 系统 的 目标 ,容易 理解 ,比较 直 
观 。 但 是 黑 盒 测试 属于 穷 举 输入 测试 方法 ,这 就 要 求 每 一 个 可 能 的 输入 或 者 输入 的 组 合 
都 被 测试 到 ,才能 查 出 程序 中 所 有 的 错误 ,这 通常 要 受到 较 大 的 限制 。 假 设 有 一 个 程序 要 
求 有 两 个 输入 数据 x 和 y 及 一 个 输出 数据 = ,在 字 长 为 32 位 的 计算 机 上 运行 。 着 zx、y 取 
整数 , 按 黑 盒 测试 方法 进行 穷 举 测试 , 则 测试 数据 的 最 大 可 能 数目 为 : 2”X2” 二 2%。 如 
果 测 试 一 组 数据 需要 1 毫秒 ,一 天 工作 24 小 时 ,一 年 工作 365 天 ,那么 完成 所 有 测试 需 
5 亿 年 。 可 见 , 要 进行 穷 举 输入 是 不 可 能 的 。 

黑 盒 测试 的 各 种 方法 中 ,应 用 较为 广泛 的 测试 方法 有 以 下 几 种 : 等 价 类 划分 法 .边界 
值 分 析 法 ,决策 表 法 和 因果 图 法 。 这 些 方法 是 比较 实用 的 ,在 项 目 中 具体 采用 什么 方法 ， 
在 设计 具体 的 测试 方案 时 自然 要 针对 开发 项 目的 特点 对 设计 方法 进行 适当 的 选择 。 


3.2 等 价 类 划分 法 


3.2.1 等 价 类 划分 法 的 概念 

等 价 类 划分 法 是 黑 盒 测试 用 例 设计 中 一 种 常用 的 设计 方法 , 它 将 不 能 穷 举 的 测试 过 
程 进行 合理 分 类 ,从 而 保证 设计 出 来 的 测试 用 例 具有 完整 性 和 代表 性 。 

等 价 类 划分 法 是 把 所 有 可 能 的 输入 数据 , 即 程序 的 输入 域 划分 成 若干 部 分 ( 子 集 ), 然 
后 从 每 一 个 子 集中 选取 少数 具有 代表 性 的 数据 作为 测试 用 例 。 所 谓 等 价 类 是 指 输入 域 的 
某 个 子 集合 ,所 有 等 价 类 的 并 集 就 是 整个 输入 域 。 在 等 价 类 中 ,各 个 输入 数据 对 于 揭露 程 
序 中 的 错误 都 是 等 效 的 ,它们 具有 等 价 特性 。 因 此 ,测试 某 个 等 价 类 的 代表 值 就 是 等 价 于 
对 这 一 类 中 其 他 值 的 测试 。 也 就 是 说 ,如 果 某 一 类 中 的 一 个 例子 发 现 了 错误 ,这 一 等 价 类 
中 的 其 他 例子 也 能 发 现 同样 的 错误 ; 反之 ,如 果 某 一 类 中 的 一 个 例子 没有 发 现 错误 , 则 这 
一 类 中 的 其 他 例子 也 不 会 查 出 错误 。 

软件 不 能 只 接收 合理 有 效 的 数据 ,也 要 具有 处 理 异 常数 据 的 功能 .这 样 的 测试 才能 
保 软 件 具 有 更 高 的 可 靠 性 。 因 此 ,在 划分 等 价 类 的 过 程 中 ,不 但 要 考虑 有 效 等 价 类 划分 ， 
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同时 也 要 考虑 无 效 等 价 类 划分 。 

有 效 等 价 类 是 指 对 软件 规格 说 明 来 说 ,合理 ` 有 意义 的 输入 数据 所 构成 的 集合 。 利 用 
有 效 等 价 类 可 以 检验 程序 是 否 满足 规格 说 明 所 规定 的 功能 和 人 性能。 

无 效 等 价 类 则 和 有 效 等 价 类 相反 , 即 不 满足 程序 输入 要 求 或 者 无 效 的 输入 数据 所 构 
成 的 集合 。 利 用 无 效 等 价 类 可 以 检验 程序 异常 情况 的 处 理 。 

使 用 等 价 类 划分 法 设计 测试 用 例 ,首先 必须 在 分 析 需 求 规格 说 明 的 基础 上 划分 等 价 
类 ,然后 列 出 等 价 类 表 。 

以 下 是 划分 等 价 类 的 几 个 原则 : 

(1) 如 果 规 定 了 输入 条 件 的 取 值 范围 或 者 个 数 , 则 可 以 确定 一 个 有 效 等 价 类 和 两 个 
无 效 等 价 类 。 例 如 ,程序 要 求 输入 的 数值 是 从 10 到 20 之 间 的 整数 , 则 有 效 等 价 类 为 “大 于 
等 于 10 而 小 于 等 于 20 的 整数 ”, 两 个 无 效 等 价 类 为 “小 于 10 的 整数 ”和 “大 于 20 的 整数 ”。 

(2) 如 果 规 定 了 输入 值 的 集合 , 则 可 以 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 例 
如 ,程序 要 进行 平方 根 函 数 的 运算 , 则 “大 于 等 于 0 的 数 ” 为 有 效 等 价 类 ,“ 小 于 0 的 数 ”为 

(3) 如 果 规 定 了 输入 数据 的 一 组 值 ,并 且 程 序 要 对 每 一 个 输入 值 分 别 进行 处 理 , 则 可 
为 每 一 个 值 确定 一 个 有 效 等 价 类 ,此 外 根据 这 组 值 确定 一 个 无 效 等 价 类 , 即 所 有 不 允许 的 
输入 值 的 集合 。 例 如 ,程序 规定 某 个 输入 条 件 x 的 取 值 只 能 为 集合 {1,3,5,7} 中 的 某 一 
个 , 则 有 效 等 价 类 为 += 二 1,z+ 二 3,z+ 二 5,x 二 7 ,程序 对 这 4 个 数值 分 别 进行 处 理 ; 无 效 等 价 
类 则 为 xz 隆 1,3,5,7 的 值 的 集合 。 

(4) 如 果 规 定 了 输入 数据 必须 遵守 的 规则 , 则 可 以 确定 一 个 有 效 等 价 类 和 若干 个 无 
效 等 价 类 。 例 如 ,程序 中 某 个 输入 条 件 规定 必须 为 4 位 数字 , 则 可 划分 一 个 有 效 等 价 类 为 
输入 数据 为 4 位 数字 ,3 个 无 效 等 价 类 分 别 为 输入 数据 中 含有 非 数字 字符 、 输 入 数据 少 于 
4 位 数字 、 输 入 数据 多 于 4 位 数字 。 

(5) 如 果 已 知 的 等 价 类 中 各 个 元 素 在 程序 中 的 处 理 方式 不 同 , 则 应 将 该 等 价 类 进 一 
步 划 分 成 更 小 的 等 价 类 。 

在 确立 了 等 价 类 之 后 ,建立 等 价 类 表 , 列 出 所 有 划分 出 的 等 价 类 ,格式 如 表 3-1 所 示 。 


表 3-1 等 价 类 表 


输入 条 件 有 效 等 价 类 无 效 等 价 类 


再 根据 已 列 出 的 等 价 类 表 , 按 以 下 步 又 确定 测试 用 例 : 
(1) 为 每 一 个 等 价 类 规定 一 个 惟一 的 编号 ; 
(2) 设计 一 个 新 的 测试 用 例 , 使 其 尽 可 能 多 地 覆盖 尚未 被 覆盖 的 有 效 等 价 类 ,重复 这 
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个 过 程 ,直至 所 有 的 有 效 等 价 类 均 被 测试 用 例 所 覆盖 ; 

(3) 设计 一 个 新 的 测试 用 例 ,使 其 仅 覆 盖 一 个 无 效 等 价 类 ,重复 这 个 过 程 , 直 至 所 有 
的 无 效 等 价 类 均 被 测试 用 例 所 覆盖 。 
3.2.2 常见 等 价 类 划分 形式 

针对 是 否 对 无 效 数据 进行 测试 ,可 以 将 等 价 类 测试 分 为 标准 等 价 类 测试 ,健壮 等 价 类 
测试 及 对 等 区 间 划 分 。 


1. 标准 等 价 类 测试 

标准 等 价 类 测试 不 考虑 无 效 数 据 值 ,测试 用 例 使 用 每 个 等 价 类 中 的 一 个 值 。 通 常 , 标 
准 等 价 类 测试 用 例 的 数量 和 最 大 等 价 类 中 元 素 的 数目 相等 。 

以 三 角形 问题 为 例 ,要 求 输入 三 个 整数 a、b、c, 分 别 作为 三 角形 的 三 条 边 , 取 值 范围 
为 1 一 100, 判 断 由 三 条 边 构成 的 三 角形 类 型 为 等 边 三 角形 .等 腰 三 角形 .一般 三 角形 以 及 
不 构成 三 角形 。 在 多 数 情况 下 ,是 从 输入 域 划分 等 价 类 ,但 对 于 三 角形 问题 ,从 输出 域 来 
定义 等 价 类 是 最 简单 的 划分 方法 。 

因此 ,利用 这 些 信息 可 以 确定 下 列 值 域 等 价 类 : 

R1 二 {a,b,c): 边 为 a,b,c 的 等 边 三 角形 } 

R2=={(a,b,c): 边 为 a,b,c 的 等 腰 三 角形 } 

R3= 二 {a,b,c);: 边 为 a,b,c 的 一 般 三 角形 } 

R4 二 {a,b,c); 边 为 a,b,c 不 能 构成 三 角形 } 

4 个 标准 等 价 类 测试 用 例如 表 3-2 所 示 。 


表 3-2 三 角形 问题 的 标准 等 价 类 测试 用 例 


测试 用 例 a b ce 预期 输出 
本 20 20 20 等 边 三 角形 
C2 20 20 10 等 腰 三 角形 
TCs 5 8 10 一 般 三 角形 
TC4 3 6 10 不 构成 三 角形 


2. 健壮 等 价 类 测试 

健壮 等 价 类 测试 主要 的 出 发 点 是 考虑 了 无 效 等 价 类 。 

对 有 效 输入 ,测试 用 例 从 每 个 有 效 等 价 类 中 取 一 个 值 ; 对 无 效 输入 ,一 个 测试 用 例 有 
一 个 无 效 值 , 其 他 值 均 取 有 效 值 。 

健壮 等 价 类 测试 存在 两 个 问题 : 

(1) 需要 花费 精力 定义 无 效 测试 用 例 的 期 望 输出 ; 

(2) 对 强 类 型 的 语言 没有 必要 考虑 无 效 的 输入 。 


本 


有 


软件 测试 教程 


对 于 上 述 三 角形 问题 , 取 a,b,c 的 无 效 值 产生 了 7 个 健壮 等 价 类 测试 用 例 , 如 表 3-3 
所 示 。 


表 3-3 三 角形 问题 的 健壮 等 价 类 测试 用 例 


测试 用 例 a b c 预期 输出 

Toei 3 4 5 一 般 三 角形 

TC2 一 1 4 4 a 值 超出 定义 域 范围 
TC3 4 一 1 4 4b 值 超出 定义 域 范围 
Tt 4 4 一 1 < 值 超出 定义 域 范围 
5 101 4 4 a 值 超出 定义 域 范围 
TC6 4 101 4 4b 值 超出 定义 域 范围 
TC7 4 4 101 < 值 超出 定义 域 范围 


3. 对 等 区 间 划 分 

对 等 区 间 划 分 是 测试 用 例 设计 的 非常 规 形 式 化 的 方法 。 它 将 被 测 对 象 的 输入 /输出 
划分 成 一 些 区 间 ,被 测 软件 对 一 个 特定 区 间 的 任何 值 都 是 等 价 的 。 形 成 测试 区 间 的 数据 
不 只 是 函数 /过 程 的 参数 ,也 可 以 是 程序 可 以 访问 的 全 局 变量 .系统 资源 等 ,这 些 变量 或 资 
源 可 以 是 以 时 间 形 式 存在 的 数据 ,或 以 状态 形式 存在 的 输入 /输出 序列 。 

对 等 区 间 划 分 假定 位 于 单个 区 间 的 所 有 值 对 测试 都 是 对 等 的 ,应 为 每 个 区 间 的 一 个 
值 设计 一 个 测试 用 例 。 

举例 说 明 如 下 : 

平方 根 函 数 要 求 当 输入 值 为 0 或 大 于 0 时 ,返回 输入 数 的 平方 根 ; 当 输入 值 小 于 0 
时 ,显示 错误 信息 “平方 根 错误 ,输入 值 小 于 0”, 并 返回 0。 

考虑 平方 根 函 数 的 测试 用 例 区 间 , 可 以 划分 出 两 个 输入 区 间 和 两 个 输出 区 间 , 如 
表 3-4 所 示 。 

表 3-4 区 间 划 分 
输入 区 间 输出 区 间 


i <0 A >>=0 
i >=0 B Error 


通过 分 析 , 可 以 用 两 个 测试 用 例 来 测试 4 个 区 间 : 


(1) 测试 用 例 1: 输入 4, 返 回 2 // 区 间 让 和 和 
(2) 测试 用 例 2: 输入 一 10, 返 回 0, 输 出 "平方 根 错误 ,输入 值 小 于 0" 
// 区 间 i 和 B 


上 例 的 对 等 区 间 划 分 是 非常 简单 的 。 当 软件 变 得 更 加 复杂 时 ,对 等 区 间 的 确定 就 越 
难 , 区 间 之 间 的 相互 依赖 性 就 越 强 , 使 用 对 等 区 间 划 分 设计 测试 用 例 技 术 的 难度 会 增加 。 


3.2.3 等 价 类 划分 法 测试 用 例 
在 某 网 站 申请 免费 信箱 时 ,要 求 用 户 必须 输入 用 户 名 、 密 码 及 确认 密码 ,对 每 一 项 输 

入 条 件 的 要 求 如 下 : 
用 户 名 要 求 为 4 一 16 位 ,使 用 英文 字母 .数字 、“-”“_”, 并 且 首 字符 必须 为 字母 或 数 

字 ; 密码 要 求 为 6 一 16 位 ,只 能 使 用 英文 字母 .数字 以 及 *-”"“_”, 并 且 区 分 大 小 写 。 
分 析 如 下 : 
(1) 分 析 程 序 的 规格 说 明 , 列 出 等 价 类 表 ( 包 括 有 效 等 价 类 和 无 效 等 价 类 ), 如 表 3-5 
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所 示 。 
表 3-5 等 价 类 表 
输入 条 件 有 效 等 价 类 编号 | 输入 条 件 无 效 等 价 类 编号 
少 于 4 位 8 
4 一 16 位 1 i 
首 字 符 为 字母 2 首 字符 为 除 字母 ,数字 之 外 的 
户 户 10 
用 户 名 | 首 闻 符 为 天 字 3 | 用 户 名 | 其 他 字符 
组 合 中 含有 除 英文 字母 ,数字 、 
Es 字 、…”* "组 全 
| “…” ”之 外 的 其 他 特殊 字符 ”| 
5 少 于 6 位 下 
| E | 多 于 16 位 13 
组 合 中 含有 除 英文 字母 .数字 、 
字母 ,数字 、“-”“_” 组 合 14 
| “…" "之 外 的 其 他 特殊 字符 
确认 密码 | 内 容 与 密码 相同 站 | 商 款 关 疝 | 电 宇 二 本 全 人 | 区 
写 不 同 
(2) 根据 上 述 等 价 类 表 ,设计 测试 用 例如 表 3-6 所 示 。 
表 3-6 测试 用 例 
测试 用 例 用 户 名 密 码 确认 密码 预期 输出 
oY abc_2000 abc_123 abc_123 注册 成 功 
Te 2000-abc 123-abc 123-abc 注册 成 功 
TC3 abc 12345678 12345678 提示 用 户 名 错误 
TC4 abcdefghijk123456 12345678 12345678 提示 用 户 名 错误 
TC5 _abc123 12345678 12345678 提示 用 户 名 错误 
TC6 abc&123 12345678 12345678 提示 用 户 名 错误 
Te7 abc_123 12345 12345 提示 密码 错误 
TC8 abc_123 abcdefghijk123456 abcdefghijk123456 | 提示 密码 错误 
TC9 abc_123 abc&123 abc&123 提示 密码 错误 
TC10 abc_123 abc_123 abc_123 提示 密码 错误 
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3.3 边界 值 分 析 法 


3.3.1 边界 值 分 析 法 的 概念 

边界 值 分 析 法 (Boundary Value Analysis,BVA) 是 一 种 补充 等 价 类 划分 法 的 测试 用 
例 设计 技术 , 它 不 是 选择 等 价 类 的 任意 元 素 .而 是 选择 等 价 类 边界 的 测试 用 例 。 在 测试 过 
程 中 ,可 能 会 忽略 边界 值 的 条 件 ,而 软件 设计 中 大 量 的 错误 是 发 生 在 输入 或 输出 范围 的 边 
界 上 ,而 不 是 发 生 在 输入 输出 范围 的 内 部 。 因 此 针对 各 种 边界 情况 设计 测试 用 例 ,可 以 查 
出 更 多 的 错误 。 

在 实际 的 软件 设计 过 程 中 ,会 涉及 大 量 的 边界 值 条 件 和 过 程 ,这 里 有 一 个 简单 的 VB 
程序 的 例子 : 


Dim num(10) as Integer 
Dim i as Integer 
For i=1 to 10 

num(i) 一 1 


Next i 


在 这 个 程序 中 ,目标 是 为 了 创建 一 个 拥有 10 个 元 素 的 一 维 数组 ,看 似 合 理 , 但 是 ,在 
大 多 数 Basic 语言 中 , 当 一 个 数组 被 定义 时 ,其 第 一 个 元 素 所 对 应 的 数组 下 标 是 0 而 不 是 
1。 由 此 ,上 述 程 序 运 行 结束 后 ,数组 中 成 员 的 赋值 情况 如 下 : 


num(0) 一 0,num(1) 一 1,num(2) 一 1,.…,num(10) 一 1 


这 时 ,如 果 其 他 程序 员 在 使 用 这 个 数组 的 时 候 , 可 能 会 造成 软件 的 缺陷 或 者 错误 的 
产生 。 

使 用 边界 值 分 析 方 法 设计 测试 用 例 ,首先 应 确定 边界 情况 。 通 常 输 入 和 输出 等 价 类 
的 边界 ,就 是 应 着 重 测试 的 边界 情况 。 应 当选 取 正 好 等 于 、 刚 刚 大 于 或 刚刚 小 于 边界 的 值 
作为 测试 数据 ,而 不 是 选取 等 价 类 中 的 典型 值 或 任意 值 作为 测试 数据 。 

在 应 用 边界 值 分 析 法 设计 测试 用 例 时 ,应 遵循 以 下 几 条 原则 : 

(1) 如 果 输入 条 件 规定 了 值 的 范围 , 则 应 该 选取 刚 达到 这 个 范围 的 边界 值 , 以 及 刚刚 
超过 这 个 范围 边界 的 值 作 为 测试 输入 数据 。 

(2) 如 果 输入 条 件 规定 了 值 的 个 数 , 则 用 最 大 个 数 .最 小 个 数 、 比 最 小 个 数 少 1、 比 最 
大 个 数 多 1 的 数 作为 测试 数据 。 

(3) 根据 规格 说 明 的 每 一 个 输出 条 件 , 分 别 使 用 以 上 两 个 原则 。 

(4) 如 果 程 序 的 规格 说 明 给 出 的 输入 域 或 者 输出 域 是 有 序 集合 (如 有 序 表 、 顺 序 文件 
等 ), 则 应 选取 集合 的 第 一 个 元 素 和 最 后 一 个 元 素 作为 测试 用 例 。 
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(5) 如 果 程 序 中 使 用 了 一 个 内 部 数据 结构 , 则 应 当选 择 这 个 内 部 数据 结构 的 边界 值 
作为 测试 用 例 。 

(6) 分 析 规 格 说 明 , 找 出 其 他 可 能 的 边界 条 件 。 

举例 说 明 如 下 : 

考虑 学 生 考试 成 绩 的 输入 (不 计 小 数 点 ) ,其 输入 数据 是 一 个 有 限 范 围 的 整数 ,可 以 确 
定 输入 数据 的 最 小 值 (min) 和 最 大 值 (max) , 则 有 效 的 数据 范围 是 min 过 Nmax, 即 0 过 
N100。 于 是 ,可 以 选取 输入 变量 的 最 小 值 (min) 、 略 大 于 最 小 值 (min 十 1) 、 略 小 于 最 大 
值 (max 一 1) 和 最 大 值 (max) 来 设计 测试 用 例 。 因 此 ,学 生 分 数 的 边界 值 分 析 法 的 有 效 测 
试 数据 是 : 0,1,99,100。 有 时 ,为 了 检查 输入 数据 超过 极限 值 时 系统 的 情况 ,还 需要 考虑 
采用 一 个 略 超过 最 大 值 Cmax 十 1) 以 及 略 小 于 最 小 值 Cmin 一 1) 的 取 值 , 即 健壮 性 测试 。 所 
以 ,上 述 学 生 分 数 输入 的 无 效 测试 数据 为 : 一 1,101。 
3.3.2 边界 条 件 与 次 边界 条 件 

边界 值 分 析 法 是 对 输入 的 边界 值 进行 测试 。 在 测试 用 例 设计 中 ,需要 对 输入 的 条 
件 进行 分 析 并 且 找 出 其 中 的 边界 值 条 件 ,通过 对 这 些 边界 值 的 测试 来 查 出 更 多 的 


错 
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提出 边界 条 件 时 ,一 定 要 测试 临近 边界 的 有 效 数据 ,测试 最 后 一 个 可 能 有 效 的 数据 ， 
同时 测试 刚 超 过 边界 的 无 效 数据 。 通 常情 况 下 ,软件 测试 所 包含 的 边界 检验 有 几 种 类 型 : 
数值 字符 ,位 置 、 数 量 、 速 度 、 尺 寸 等 。 在 设计 测试 用 例 时 要 考虑 边界 检验 的 类 型 的 特征 : 
第 一 个 /最 后 一 个 开始 /完成 、 空 / 满 , 最 大 值 /最 小 值 . 最 快 /最 慢 、 最 高 /最 低 、 最 长 /最 短 
等 。 这 些 不 是 确定 的 列表 ,而 是 一 些 可 能 出 现 的 边界 条 件 。 
举 个 例子 来 说 明 一 下 ,如 表 3-7 所 示 。 
表 3-7 利用 边界 值 作为 测试 数据 的 例子 


项 边界 值 测试 用 例 的 设计 思路 
本 起 始 一 1 个 字符 /结束 可 访 一 个 文本 宾 从 区 坊村 深 元 放生 到 255 作 玫 全 本 2 个 
字符 和 255 个 字符 作为 有 效 等 价 类 ; 输入 0 个 和 256 个 字符 作为 无 效 


十 1 个 字条 
大 入 等 价 类 ,这 几 个 数值 都 属于 边界 条 件 值 


假设 软件 要 求 输入 的 数据 为 5 位 数值 , 则 可 以 使 用 00000 作为 最 
数值 | 开始 位 一 1/ 结 束 位 十 1 | 小 值 和 99999 作为 最 大 值 ,然后 使 用 刚好 小 于 5 位 和 大 于 5 位 的 
数值 来 作为 边界 条 件 


方向 | 刚刚 超过 /刚刚 低 于 


小 于 空余 空间 一 点 /大 | 假如 要 做 磁盘 的 数据 存储 ,使 用 比 最 小 剩余 磁盘 空间 大 一 点 ( 几 
于 满 空间 一 点 KB) 的 文件 作为 最 大 值 的 检验 边界 条 件 
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在 多 数 情况 下 ,边界 值 条 件 是 基于 应 用 程序 的 功能 设计 而 需要 考虑 的 因素 ,可 以 从 软 
件 的 规格 说 明 或 常识 中 得 到 ,也 是 最 终 用 户 通常 最 容易 发 现 的 问题 。 然 而 ,在 测试 用 例 设 
计 过 程 中 , 某 些 边界 值 条 件 是 不 需要 呈现 给 用 户 的 ,或 者 说 用 户 很 难 注 意 到 这 些 问题 ,但 
这 些 边 界 条 件 同时 确实 属于 检验 范畴 内 的 边界 条 件 , 称 为 内 部 边界 值 条 件 或 次 边界 值 条 
件 。 主 要 有 下 面 三 种 。 

1. 数值 的 边界 值 检验 

计算 机 是 基于 二 进 制 进行 工作 的 ,因此 ,任何 数值 运算 都 有 一 定 的 范围 限制 ,如 表 3-8 
所 示 。 


表 3-8 计算 机 数值 运算 的 范围 


项 范围 或 值 
位 (bit) 0 或 1 
字 节 (byte) 0~255 
字 (word) 0 一 65、535( 单 字 ) 或 0 一 4、294、967 、295( 双 字 ) 
TT(K) 1024 
兆 (M) 1048576 
吉 (G) 1073741824 
太 (T) 1099511627776 


例如 对 字 节 进行 检验 ,边界 值 条 件 可 以 设置 成 254、255 和 256 。 


2. 字符 的 边界 值 检验 
在 字符 的 编码 方式 中 ,ASCII 和 Unicode 是 比较 常见 的 编码 方式 , 表 3-9 中 列 出 了 一 
些 简 单 的 ASCII 码 对 应 表 。 


表 3-9 字符 的 ASCII 码 对 应 表 


字 符 ASCII 码 值 字 符 ASCII 码 值 
空 CnulD) 0 A 65 
空格 (space) 32 a 97 
斜 杠 (/) 47 左 中 括号 ([) 91 
0 48 z 2 
冒号 (: ) 58 Z 90 
@ 64 单 引 号 (") 96 


在 进行 文本 输入 或 者 文本 转换 的 测试 过 程 中 ,需要 非常 清晰 地 了 解 ASCII 码 的 一 些 
基本 对 应 关系 ,例如 小 写字 母 z 和 大 写字 母 Z 在 表 中 的 对 应 是 不 同 的 ,这 些 也 必须 被 考虑 
到 数据 区 域 划 分 的 过 程 中 ,从 而 定义 等 价 有 效 类 ,来 设计 测试 用 例 。 
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3. 其 他 边界 值 检验 
包括 默认 值 / 空 值 /空格 /未 输入 值 / 零 .无 效 数 据 / 不 正确 数据 和 干扰 数据 等 。 
在 实际 的 测试 用 例 设 计 中 ,需要 将 基本 的 软件 设计 要 求 和 程序 定义 的 要 求 结合 起 来 ， 


即 结合 基本 边界 值 条 件 和 子 边界 值 条 件 来 设计 有 效 的 测试 用 例 。 


3 


.3.3 边界 值 分 析 法 测试 用 例 
某 程序 要 求 输入 三 个 整数 xz,y,z, 分 别 作 为 长 方 体 的 长 . 宽 、 高 ,x,y,z 的 取 值 范围 均 


为 2 一 20, 试 计算 长 方 体 的 体积 。 表 3-10 给 出 了 健壮 性 边界 值 分 析 测 试用 例 。 


表 3-10 健壮 性 边界 值 分 析 测 试用 例 


测试 用 例 2 y z 预期 输出 
TC1 10 10 工 值 超出 范围 
TC2 4 10 10 200 
TC3 3 10 10 300 
TC4 10 10 10 1000 
TS 19 10 10 1900 
TC6 20 10 10 2000 
Te? 21 10 10 工 值 超出 范围 
8 10 1 10 y 值 超出 范围 
TC9 10 区 10 200 
To 10 3 10 300 
Te 10 19 10 1900 
TO12 10 20 10 2000 
TC13 10 21 10 y 值 超出 范围 
TC14 10 10 1 > 值 超出 范围 
TCIS 10 10 2 200 
TC16 10 10 3 300 
To 10 10 19 1900 
TC18 10 10 20 2000 
TC19 10 10 和 > 值 超出 范围 


3.4 决策 表 法 


| 


怕 


.4.1 决策 表 法 的 概念 
在 所 有 的 黑 盒 测试 方法 中 ,基于 决策 表 ( 也 称 判定 表 ) 的 测试 是 最 为 严格 .最 具有 逻辑 
的 测试 方法 。 决 策 表 是 分 析 和 表达 多 个 逮 辑 条 件 下 执行 不 同 操作 情况 的 工具 。 由 于 决 
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策 表 可 以 把 复杂 的 逻辑 关系 和 多 种 条 件 组 合 的 情况 表达 得 既 具 体 又 明确 ,因此 在 程序 设 
计 发 展 的 初期 ,决策 表 就 已 被 当 作 编 写 程序 的 辅助 工具 了 。 
决策 表 通 常 由 四 个 部 分 组 成 ,如 图 3-1 所 示 。 
(1) 条 件 桩 : 列 出 了 间 题 的 所 有 条 件 , 通 常 认为 列 出 的 条 件 的 先后 次 序 无 关 紧 要 。 
(2) 动作 桩 : 列 出 了 问题 规定 的 可 能 采取 的 操作 ,这 些 操作 的 排列 顺序 没有 约束 。 
(3) 条 件 项 : 针对 条 件 桩 给 出 的 条 件 列 出 所 有 可 能 的 取 值 。 
(4) 动作 项 : 与 条 件 项 紧密 相关 , 列 出 在 条 件 项 的 各 组 取 值 情况 下 应 该 采取 的 动作 。 


规则 


动作 桩 | 动作 项 | 


图 3-1 决策 表 的 组 成 


任何 一 个 条 件 组 合 的 特定 取 值 及 其 相应 要 执行 的 操作 称 为 一 条 规则 ,在 决策 表 中 贯 
穿 条 件 项 和 动作 项 的 一 列 就 是 一 条 规则 。 显 然 ,决策 表 中 列 出 多 少 组 条 件 取 值 ,也 就 有 多 
少 条 规则 , 即 条 件 项 和 动作 项 有 多 少 列 。 

根据 软件 规格 说 明 ,建立 决策 表 的 步骤 如 下 : 

(1) 确定 规则 的 个 数 。 假 如 及 个 条 件 , 每 个 条 件 有 两 个 取 值 , 故 有 2" 种 规则 。 

(2) 列 出 所 有 的 条 件 桩 和 动作 桩 。 

(3) 填 人 条 件 项 。 

(4) 填 人 动作 项 ,得 到 初始 决策 表 。 

(5) 化 简 。 合 并 相似 规则 (相同 动作 ) 。 

以 下 列 问题 为 例 给 出 构造 决策 表 的 具体 过 程 。 

如 果 某 产品 销售 好 并 且 库 存 低 , 则 增加 该 产品 的 生产 ; 如 果 该 产品 销售 好 ,但 库存 量 
不 低 , 则 继续 生产 ; 车 该 产品 销售 不 好 ,但 库存 量 低 , 则 继续 生产 ; 若 该 产品 销售 不 好 , 且 
库存 量 不 低 , 则 停止 生产 。 

解法 如 下 : 

(1) 确定 规则 的 个 数 。 对 于 本 题 有 2 个 条 件 ( 销 售 、 库 存 ) ,每 个 条 件 可 以 有 两 个 取 
值 , 故 有 2?==4 种 规则 。 

(2) 列 出 所 有 的 条 件 桩 和 动作 桩 。 

(3) 填 信 条件 项 。 

(4) 填 入 动作 项 ,得 到 初始 决策 表 , 如 表 3-11 所 示 。 
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表 3-11 决策 表 
规则 
选项 3 4 
Cl1: 销售 好 ? 地 F F 
条 件 C2: 库存 低 ? 下 F T F 
al: 增加 生产 JV 
动作 a2: 继续 生产 Vv Vv 
a3: 停止 生产 ~ 


每 种 测试 方法 都 有 适用 的 范围 ,决策 表 法 适用 于 下 列 情况 : 

(1) 规格 说 明 以 决策 表 形 式 给 出 ,或 很 容易 转换 成 决策 表 。 

(2) 条 件 的 排列 顺序 不 会 也 不 应 影响 执行 哪些 操作 。 

(3) 规则 的 排列 顺序 不 会 也 不 应 影响 执行 哪些 操作 。 

(4) 每 当 某 一 规则 的 条 件 已 经 满足 ,并 确定 要 执行 的 操作 后 ,不必 检验 别 的 规则 。 

(5) 如 果 某 一 规则 得 到 满足 要 执行 多 个 操作 ,这 些 操作 的 执行 顺序 无 关 紧 要 。 
3.4.2 决策 表 法 的 应 用 

决策 表 最 突出 的 优点 是 ,能 够 将 复杂 的 问题 按照 各 种 可 能 的 情况 全 部 列举 出 来 ,简明 
并 避免 遗漏 。 因 此 ,利用 决策 表 能 够 设计 出 完整 的 测试 用 例 集合 。 运 用 决策 表 设 计 测 试 
用 例 , 可 以 将 条 件 理解 为 输入 ,将 动作 理解 为 输出 。 

例如 , 某 股票 公司 的 佣金 政策 如 下 : 如 果 一 次 销售 额 少 于 1000 元 ,那么 基础 佣金 将 
是 销售 额 的 8. 4%; 如 果 销 售 额 大 于 1000 元 ,但 少 于 10000 元 ,那么 基础 佣金 将 是 销售 额 的 
5%% ,外 加 34 元 ; 如 果 销 售 额 大 于 10000 元 ,那么 基础 佣金 将 是 销售 额 的 4% ,外 加 134 元 。 
另外 销售 单价 和 销售 的 份 数 对 佣金 也 有 影响 。 如 果 单 价 低 于 14 元 / 份 , 则 外 加 基础 佣金 
的 5%, 此 外 车 不 是 整 百 的 份 数 ,再 外 加 4% 的 基础 佣金 ; 若 单价 在 14 元 / 份 以 上 ,但 低 于 
25 元 / 份 , 则 加 2% 的 基础 佣金 ,车 不 是 整 百 的 份 数 ,再 外 加 4% 的 基础 佣金 ; 若 单 价 在 
25 元 / 份 以 上 ,并 且 不 是 整 百 的 份 数 , 则 外 加 4% 的 基础 佣金 。 

分 析 如 下 : 

(1) 分 析 各 种 输入 情况 , 列 出 为 输入 变量 销售 额 单价 、 份 数 划分 的 有 效 等 价 类 。 

销售 额 的 有 效 等 价 类 

S1: {0 委 Sale<<1000》 

S2: {1000Sale=<10000)} 

S3: {Sale 宇 10000} 

单价 的 有 效 等 价 类 : 

Pl: (Price<14} 

P2: (14 委 Price<25} 
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P3: {Price 之 25} 

份 数 的 有 效 等 价 类 : 

Bl1: { 整 百 的 份 数 } 

B2: {不 是 整 百 的 份 数 } 

(2) 分 析 程 序 的 规格 说 明 ,并 结合 以 上 等 价 类 划分 的 情况 ,给 出 问题 规定 的 可 能 采取 
的 操作 ( 即 列 出 所 有 的 动作 桩 )。 考 虑 各 种 有 效 的 输入 情况 ,程序 中 可 能 采取 的 操作 有 以 
下 6 种 ， 

al : 基础 佣金 为 销售 额 的 8. 4% 

a2: 基础 佣金 为 销售 额 的 5% 十 34 元 

a3: 基础 佣金 为 销售 额 的 4% 十 134 元 

a4: 基础 佣金 的 5% 

a5: 基础 佣金 的 2% 

a6: 基础 佣金 的 4% 

(3) 根据 以 上 分 析 的 步骤 (1) 和 (2) , 画 出 决策 表 , 如 表 3-12 所 示 。 


表 3-12 股票 佣金 政策 的 决策 表 


选项 天 网 1 2 3 4 5 6 9 8 9 
Cl1: 销售 额 Sl sl Sl Sl Sl Sl S2 S2 S2 
条 件 | C2: 单价 | Pe P2 P2 P3 P3 Pi Pl P2 
C3: 份 数 Bl B2 Bl B2 Bl B2 Bl B2 Bl 
al V V V Vv Vv Vv 
a2 V V ~ 
a3 
a 可 i VY 
a5 V V V/ 
a6 V. V V/ ~ 
规则 
10 11 12 13 14 15 16 17 18 
选项 
Cl1: 销售 额 S2 S2 S2 S3 S3 S3 S3 S3 S3 
条 件 C2: 单价 P2 py Ps Pl pn P2 P2 Pp3 P3 
C3: 份 数 B2 Bl B2 Bl B2 Bl B2 Bl B2 
al 
a2 V/ V V 
a3 V V V Vv ~ ~V 
nl | 
a5 JV V J 
a6 ~ ~ JV ~ ~ 
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根据 决策 表 3-12, 可 设计 测试 用 例 , 如 表 3-13 所 示 。 


表 3-13 ”股票 佣金 政策 的 测试 用 例 表 
测试 用 例 销售 额 (元 ) 单价 (元 / 份 ) 份 数 ( 份 ) 预期 输出 (元 ) 


TC1 800 12 200 70. 56 
TC2 800 12 240 73. 25 
TC3 800 20 200 68. 54 
TC4 800 20 240 71.23 
TC5 800 30 200 67.2 
TC6 800 30 240 69. 89 
TC7 6000 12 500 350.7 
TC8 6000 12 750 364. 06 
TC9 6000 20 500 340. 68 
TC10 6000 20 750 354.04 
TC11 6000 30 500 334 
TC12 6000 30 750 347. 36 
TC13 20000 12 4000 980.7 
TC14 20000 12 4590 1018. 06 
TC15 20000 20 4000 952. 68 
TC15 20000 20 4590 990. 04 
TC17 20000 30 4000 934 
TC18 20000 30 4590 971. 36 


3.5 因果 图 法 


3.5.1 因果 图 法 的 概念 

前 面 介 绍 的 等 价 类 划分 法 和 边界 值 分 析 法 都 着 重 考虑 输入 条 件 ,而 没有 考虑 到 输入 
条 件 的 各 种 组 合 情 况 ,也 没有 考虑 到 各 个 输入 条 件 之 间 的 相互 制约 关系 。 因 此 ,必须 考虑 
采用 一 种 适合 于 多 种 条 件 的 组 合 , 相 应 能 产生 多 个 动作 的 形式 来 进行 测试 用 例 的 设计 ,这 
就 需要 采用 因果 图 法 。 因 果 图 法 就 是 一 种 利用 图 解法 分 析 输 入 的 各 种 组 合 情 况 ,从 而 设 
计 测 试用 例 的 方法 , 它 适合 于 检查 程序 输入 条 件 的 各 种 情况 的 组 合 。 

在 因果 图 中 使 用 4 种 符号 分 别 表 示 4 种 因果 关系 ,如 图 3-2 所 示 。 用 直线 连接 左右 
结 点 ,其 中 左 结 点 C; 表示 输入 状态 (或 称 原因 ) , 右 结 点 e 表示 输出 状态 (或 称 结果 ) 。C， 
和 e 都 可 取 值 0 或 1,0 表示 某 状 态 不 出 现 ,1 表示 某 状态 出 现 。 

图 3-2 中 各 符号 的 含义 如 下 : 

(a) 图 表 恒 等 : 车 Ci 是 1, 则 e 也 是 1; 否则 车 Ci 是 0, 则 e: 为 0。 
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(Ce) 或 (dd) 与 
图 3-2 因果 图 的 基本 符号 


(b) 图 表 非 : 若 C 是 1 , 则 el 是 0; 否则 CG 是 0, 则 el 为 本 

(c) 图 表 或 : 若 Ci 或 C: 或 Cs 是 1, 则 e 是 1; 否则 若 CC Cs 全 为 0, 则 e 为 0。 

(d) 图 表 与 : 若 C 和 Ca 都 是 1, 则 el 是 水 否则 只 要 人 中 有 一 个 为 0,e 
为 0。 

在 实际 问题 中 ,输入 状态 相互 之 间 还 可 能 存在 某 些 依赖 关系 ,我 们 称 之 为 约束 。 例 
如 , 某 些 输入 条 件 不 可 能 同时 出 现 。 输 出 状态 之 间 也 往往 存在 约束 ,在 因果 图 中 ,以 特定 
的 符号 标明 这 些 约束 ,如 图 3-3 所 示 。 


(a) 异 (b) 或 (c) 惟一 
© ©O、 
R! MM 
‘© © 
(d) 要 求 (e) 强制 
图 3-3 ”约束 符号 
对 输入 条 件 的 约束 有 : 


Ca) 图 表 正 约束 ( 异 ): a 和 b 中 最 多 有 一 个 可 能 为 1, 即 a 和 b 不 能 同时 为 1。 
(b) 图 表 I 约 束 ( 或 ): a、b 和 c 中 至 少 有 一 个 必须 是 1, 即 ab 和 c 不 能 同时 为 0。 
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(c) 图 表 O 约束 (惟一 ): a 和 b 中 必须 有 一 个 且 仅 有 一 个 为 1 。 

(d) 图 表 R 约束 (要求 ) : a 是 1 时 ,b 必须 是 1, 即 a 是 1 时 ,b 不 能 是 0。 

对 输出 条 件 的 约束 只 有 M 约束 。 

(e) 图 表 M 约束 (强制 ) : 若 结果 a 是 1, 则 结果 b 强制 为 0。 

因果 图 法 最 终 要 生成 决策 表 。 

利用 因果 图 法 生成 测试 用 例 需 要 以 下 几 个 步骤 : 

(1) 分 析 软 件 规格 说 明 书 中 的 输入 输出 条 件 , 并 且 分 析出 等 价 类 。 分 析 规 格 说 明 中 
的 语义 的 内 容 , 通 过 这 些 语义 来 找 出 相对 应 的 输入 与 输入 之 间 , 输 入 与 输出 之 间 的 对 应 

(2) 将 对 应 的 输入 与 输入 之 间 ,输入 与 输出 之 间 的 关系 连接 起 来 ,并 且 将 其 中 不 可 能 
的 组 合 情 况 标注 成 约束 或 者 限制 条 件 ,形成 因果 图 。 

(3) 将 因果 图 转换 成 决策 表 。 

(4) 将 决策 表 的 每 一 列 作为 依据 ,设计 测试 用 例 。 

各 步 又 如 图 3-4 所 示 。 

从 因果 图 生成 的 测试 用 例 中 包括 了 所 有 输入 数据 取 True 与 False 的 情况 ,构成 的 测 
试用 例 数目 达到 最 少 , 且 测 试用 例 数目 随 输 入 数据 数目 的 增加 而 线性 地 增加 。 


输入 输出 数据 
输入 输出 数据 
间 的 关系 


关联 不 同 组 台 间 的 关联 、 约 束 或 限 
制 条 件 ， 形 成 因果 图 


分 析 


转换 将 因果 图 转换 成 判定 表 


图 3-4 因果 图 法 示例 
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3.5.2 因果 图 法 测试 用 例 
某 软件 规格 说 明 中 包含 这 样 的 要 求 : 输入 的 第 一 个 字符 必须 是 A 或 B, 第 二 个 字符 
必须 是 一 个 数字 ,在 此 情况 下 进行 文件 的 修改 ; 但 如 果 第 一 个 字符 不 正确 , 则 给 出 信息 
L; 如 果 第 二 个 字符 不 是 数字 , 则 给 出 信息 M。 
解法 如 下 : 
(1) 分 析 程 序 的 规格 说 明 , 列 出 原因 和 结果 。 
原因 : Ci 一 一 第 一 个 字符 是 A 
Cz: 一 一 第 一 个 字符 是 B 
C: 一 一 第 二 个 字符 是 一 个 数字 
结果 : ea 一 一 给 出 信息 L 
ea 一 一 修改 文件 
e 一 给 出 信息 M 
(2) 将 原因 和 结果 之 间 的 因果 关系 用 逻辑 符号 连接 起 来 ,得 到 因果 图 ,如 图 3-5 所 
示 。 编 号 为 11 的 中 间 结 点 是 导出 结果 的 进一步 原因 。 


图 3-5 因果 图 示例 


因为 C 和 Cs 不 可 能 同时 为 1, 即 第 一 个 字符 不 可 能 既是 A 又 是 B, 在 因果 图 上 可 对 
其 施加 眉 约束 ,得 到 具有 约束 的 因果 图 ,如 图 3-6 所 示 。 


图 3-6 具有 下 约束 的 因果 图 


(3) 将 因果 图 转换 成 决策 表 , 如 表 3-14 所 示 。 
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(4) 设计 测试 用 例 。 表 3-14 中 的 前 两 种 情况 ,因为 C; 和 Cs* 不 可 能 同时 为 1, 所 以 应 
排除 这 两 种 情况 。 根 据 此 表 , 可 以 设计 出 6 个 测试 用 例 , 如 表 3-15 所 示 。 


表 3-14 决策 表 
规则 1 2 5 6 
选项 3 4 5 3 8 
的 1 1 1 1 0 0 0 0 
CS 1 1 0 0 1 | 0 0 
条 件 
G3 1 0 1 0 1 0 了 0 
二 1 1 1 i 0 0 
el 0 0 0 0 YL 1 
2 1 0 1 0 0 0 
动作 ° 
e3 0 EL 0 1 0 1 
不 可 能 1 1 
测试 用 例 A5 A# B9 B? X2 Y% 
表 3-15 测试 用 例 
编号 输入 数据 预期 输出 
TC1 A5 修改 文件 
TC2 A# 给 出 信息 M 
TC3 B9 修改 文件 
TC4 B? 给 出 信息 M 
TC5 X2 给 出 信息 工 
TC6 Y% 给 出 信息 L 和 信息 M 


事实 上 ,在 较为 复杂 的 问题 中 ,因果 图 法 非常 有 效 , 可 以 帮助 检查 输入 条 件 组 合 ,设计 
出 非 宛 余 高效 的 测试 用 例 。 如 果 开 发 项 目 在 设计 阶段 就 采用 了 决策 表 , 就 不 必 再 画 因 果 
图 ,可 以 直接 利用 决策 表 设 计 测 试用 例 。 


3.6 实例 设计 


本 节 将 以 成 绩 管 理 系 统 为 例 , 介 绍 在 实际 项 目 中 如 何 来 做 黑 盒 测试 。 测 试用 例 的 设 
计 方 法 不 是 单独 存在 的 ,具体 到 每 个 测试 项 目 里 都 会 用 到 多 种 方法 ,在 实际 测试 中 ,往往 
是 综合 使 用 各 种 方法 才能 高 效率 、 高 质量 的 完成 测试 。 一 个 好 的 测试 策略 和 测试 方法 必 
将 给 整个 测试 工作 带 来 事半功倍 的 效果 ,从 而 充分 利用 有 限 的 人 力 和 物力 资源 。 

在 本 系统 中 ,登录 窗口 的 界面 如 图 3-7 所 示 , 成 绩 录入 窗口 的 界面 如 图 3-8 所 示 。 
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选 泽 身份， 所 | 
用 户 名 [一 一 一 一 
sa 


Cj | 


图 3-7 系统 登录 界面 


选择 学 院 ， [信息 工程 字 院 = 
选择 系 部 ， [计算 机 科学 与 技术 二 


图 3-8 成绩 录入 界面 


在 登录 窗口 中 不 考虑 身份 选择 情况 ,只 验证 用 户 名 和 密码 以 及 登录 、 重 填 按 钮 的 正确 
性 。 用 户 名 和 密码 的 输入 条 件 均 要 求 为 不 超过 16 位 ,可 以 使 用 汉字 、 英 文字 母 和 数字 及 
各 种 组 合 。 
首先 应 用 等 价 类 划分 法 对 用 户 名 和 密码 进行 等 价 类 划分 (包括 有 效 等 价 类 和 无 效 等 
价 类 ) ,如 表 3-16 所 示 。 


表 3-16 登录 窗口 的 等 价 类 表 


输入 条 件 有 效 等 价 类 编号 | 输入 条 件 无 效 等 价 类 编号 
空 值 5 
用 户 名 Se 用 户 名 多 于 16 位 6 
组 合 中 含有 除 英文 字母 、 数 
字 芋 < 机 ， 字 纪 合 2 7 
让 字 .汉字 之 外 的 其 他 字符 
轩 空 值 8 
密码 ce - 密码 多 于 16 位 9 
a 组 合 中 含有 除 英文 字母 . 数 | 10 
ES 字 、 汉 字 之 外 的 其 他 字符 


登录 窗口 除了 要 验证 用 户 名 和 密码 的 有 效 性 ,还 要 验证 各 个 功能 之 间 的 正确 性 , 因 
此 ,再 应 用 决策 表 法 。 登 录 窗口 对 应 的 决策 表 如 表 3-17 所 示 。 


表 3-17 登录 窗口 的 决策 表 


规则 


3 


C1l: 用 户 名 正确 ? 


C2: 密码 正确 ? 


C3: 选择 登录 按钮 


C4: 选择 重 填 按钮 


olcic|- 


al: 提示 错误 


lolnls le 
pa ey ed ee 


<|lol-lolo 


a2: 成 功 登录 


a3: 重 填 选 项 


不 可 能 


根据 上 述 分 析 ,可 以 确定 测试 用 例如 表 3-18 所 示 。 
表 3-18 登录 窗口 测试 用 例 
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项 目 /软件 名 称 | 成 绩 管理 系统 程序 版 本 | 1.0 
功能 模块 名 LOGIN 编制 人 xxx 
用 例 编号 SYSTEM_LOGIN_1 | 编制 时 间 | 2006. 3. 25 
相关 的 用 例 无 预 置 条 件 | 无 
功能 特性 用 户 身份 验证 
测试 目的 验证 是 否 输入 合法 的 信息 ,允许 合法 登录 ,阻止 非法 登录 
预 置 条 件 无 特殊 规程 说 明 如 数据 库 访问 权限 
参考 信息 需求 说 明 中 关于 “登录 ”的 说 明 
测试 数据 用 户 名 : abcd 密码 : 123 
操作 步骤 操作 描述 数 据 期 望 结果 实际 结 
i 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd 成 功 登录 ,进入 系 _ 致 
“登录 ”按钮 密码 : 123 统 页 面 
下 了 用 户 名 : 空 提示 “用 户 名 , 
2 输入 密码 , 单 击 " 登 录 ” 按 钮 密码 ,123 错误 1” 一 数 
a 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcdefghijk123456 | 提示 “用 户 名 _ 致 
“登录 ”按钮 密码 : 123 错误 !” 
输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd# 提示 “用 户 名 _ 致 
“登录 ”按钮 密码 : 123 错误 !” 
ee 和 密码 , 单 击 ee 提示 “密码 错误 1 _ 致 
输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd Se 
“登录 "按钮 密码 ; abcdefghijk123456 | 提示 ”密码 错误 ! 一 至 
输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd 区 本 
学 “登录 ”按钮 密码 : 123 x 提示 “密码 错误 ! 一 致 
输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd i 
”| “登录 " 按 乌 密码 : 321 | 
和 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : dcba 提示 “用 户 名 _ 致 
“登录 ”按钮 密码 : 123 错误 !” 
二 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : dcba 提示 “用 户 名 _ 致 
“登录 ”按钮 密码 : 321 错误 !1” 
a 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : 空 提示 “用 户 名 _ 致 
“登录 ”按钮 密码 : 空 错误 !” 
入 输入 用 户 名 和 密码 , 单 击 | 用 户 名 : abcd 清空 所 有 输入 _ 臻 
“ 重 填 ”按钮 密码 : 123 信息 


区 
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成 绩 录 入 窗口 的 需求 规格 说 明 如 下 : 界面 应 包括 三 个 下 拉 列 表 , 分 别 用 于 显示 各 学 
院 名 称 、 各 系 部 名 称 及 各 班级 名 称 。 只 有 选择 了 某 一 个 学 院 后 , 系 部 列表 框 才 为 可 用 , 列 
表 中 将 显示 出 所 选择 学 院 对 应 的 所 有 系 部 ; 同样 ,只 有 选择 了 某 一 个 学 院 后 ,又 选择 了 某 
一 个 系 部 ,此 时 班级 列表 框 才 为 可 用 ,列表 中 将 显示 出 所 选择 系 部 对 应 的 所 有 班级 。 当 三 
个 选项 都 已 经 完成 选择 后 ,界面 上 则 会 显示 出 所 选 班级 的 名 单 , 这 时 就 可 以 录入 成 绩 了 。 

对 于 本 例 ,可 以 利用 决策 表 的 方法 来 设计 测试 用 例 , 步 又 如 下 : 

(1) 建立 决策 表 。 由 规格 说 明 可 以 分 析出 ,基本 输入 事件 有 : 

Q@ C1: 选择 学 院 

@ C2: 选择 系 部 

@ C3: 选择 班级 

基本 输出 事件 有 : 

@ al: 显示 所 选 班级 名 单 

@ a2: 学 院 列表 框 可 用 

@ a3: 系 部 列表 框 可 用 

@ a4: 班级 列表 框 可 用 

GO a5: 显示 各 学 院 名 称 

@ a6: 显示 各 系 部 名 称 

@ a7: 显示 各 班级 名 称 

@ a8: 不 能 显示 具体 选项 (如 在 没有 选择 学 院 的 前 提 下 , 系 部 列表 框 中 将 不 能 显示 
所 对 应 的 具体 系 部 ) 

根据 上 述 分 析 得 出 的 输入 事件 .输出 事件 建立 决策 表 , 如 表 3-19 所 示 。 


表 3-19 输入 和 输出 决策 表 


六 中 2 3 4 5 6 7 8 
选项 
Cl1: 选择 学 院 下 下 年 TT F F F F 
条 件 C2: 选择 系 部 检 F F 于 F F 
C3: 选择 班级 至 芝 工 其 T F 和 到 
al: 显示 所 选 班级 名 单 Vv 
a2: 学 院 列表 框 可 用 Vv V V V V V V 
a3: 系 部 列表 框 可 用 V V V 
动作 a4: 班级 列表 框 可 用 ~V 
a5: 显示 各 学 院 名 称 V V V 
a6: 显示 各 系 部 名 称 
a7: 显示 各 班级 名 称 V V V V 
a8: 不 能 显示 具体 选项 


(2) 确定 测试 用 例 , 如 表 3-20 所 示 。 
表 3-20 成 绩 录入 窗口 测试 用 例 
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项 目 /软件 名 称 | 成 绩 管理 系统 程序 版 本 1.0 
功能 模块 名 INPUT 编制 人 六 光 泥 
用 例 编号 SYSTEM_INPUT 1 编制 时 间 2006. 3. 25 
相关 的 用 例 无 预 置 条 件 。 | 无 
功能 特性 成 绩 录入 
测试 目的 验证 成 绩 录入 窗口 是 否 符合 用 户 的 需求 
预 置 条 件 无 特殊 规程 说 明 如 数据 库 访 问 权限 
参考 信息 需求 说 明 中 关于 “成 绩 录入 ”的 说 明 
测试 数据 学 院 ; 信息 工程 学 院 ; 系 部 , 计算 机 科学 与 技术 ; 班级 : 计算 机 软件 9601 
操作 步 又 操作 描述 数据 期 望 结果 实际 结果 
依次 单 击 并 选择 学 | 学院 : 信息 工程 学 院 | 三 个 列表 框 均 可 用 ,显示 所 
1 和 系 部 ; 计算 机 科学 与 技术 | 这 班级 名 音 一 到 
班级 : 计算 机 软件 9601 
ee 三 个 列表 框 均 可 用 ,学 院 列 
ei 学 院 : 信息 工程 学 院 表 框 中 显示 信息 工程 学 院 ， 
2 。 | 如 类 要 但 并 不 选择 | 系 部 : 计算 机 科学 与 技术 | 系 部 列表 框 中 显示 计算 机 | “一致 
总 班级 : 空 科学 与 技术 ,班级 列表 中 可 
以 显示 数据 项 
学 院 和 系 部 列表 可 用 ,学 院 
we 学 院 : 信息 工程 学 院 列表 框 中 显示 信息 工程 学 
| et 院 . 系 部 列表 框 中 可 以 显示 | “一 至 
人 班级 : 空 数据 项 .班级 列表 中 不 能 显 
示 相 应 数据 项 
学 院 和 系 部 列表 可 用 ,学 院 
A 学 院 : 信息 工程 学 院 列表 框 中 显示 信息 工程 学 
二 | 沁 但 非 玉 泛 状 站 让 | 院 . 系 部 列表 框 中 可 以 显示 | 一 至 
六 汪 班级 : 空 数据 项 ,班级 列表 中 不 能 显 
示 相 应 数据 项 
单 击 但 不 选择 学 院 , | 学院: 空 学 院 列表 可 用 , 系 部 和 班级 
5 “| 单 击 并 选择 系 部 和 | 系 部 : 空 列表 中 不 能 显示 相应 数 | 一 臻 
班级 班级 : 空 据 项 
单 击 但 不 选择 学 院 , | 学院 : 空 学 院 列表 可 用 , 系 部 和 班级 
6 单 击 并 选择 系 部 , 单 | 系 部 : 空 列表 中 不 能 显示 相应 数 | 一 至 
击 但 并 不 选择 班级 | 班级 : 空 据 项 
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续 表 
操作 步骤 操作 描述 数 据 期 望 结果 实际 结果 
单 击 但 不 选择 学 院 ，| 学 院 : 空 学 院 列表 可 用 , 系 部 和 班级 
¥ 单 击 但 并 不 选择 系 | 系 部 : 空 列表 中 不 能 显示 相应 数 | 一 至 

部 , 单 击 并 选择 班级 | 班级 : 空 据 项 
8 单 击 但 不 选择 学 院 ”| 系 部 : 空 学 院 列表 可 用 一 至 


3.7 测试 方法 的 选择 


为 了 最 大 限度 地 减少 测试 遗留 的 缺陷 ,同时 也 为 了 最 大 限度 地 发 现存 在 的 缺陷 ,在 测 
试 实施 之 前 ,测试 工程 师 必 须 确定 将 要 采用 的 测试 策略 和 测试 方法 ,并 以 此 为 依据 制定 详 
细 的 测试 方案 。 通 常 ,一 个 好 的 测试 策略 和 测试 方法 必 将 给 整个 测试 工作 带 来 事半功倍 


的 效果 。 

如 何 才能 确定 好 的 测试 策略 和 测试 方法 呢 ? 通常 ,在 确定 测试 方法 时 ,应 该 遵循 以 下 
原则 : 

(1) 根据 程序 的 重要 性 和 一 旦 发 生 故 障 将 造成 的 损失 程度 来 确定 测试 等 级 和 测试 


(2) 认真 选择 测试 策略 ,以 便 能 尽 可 能 少 地 使 用 测试 用 例 , 发 现 尽 可 能 多 的 程序 错 
误 。 因 为 一 次 完整 的 软件 测试 过 后 ,如 果 程 序 中 遗留 的 错误 过 多 并 且 严 重 , 则 表明 该 次 测 
试 是 不 足 的 ,而 测试 不 足 则 意味 着 让 用 户 承 担 隐藏 错误 带 来 的 危险 ,但 测试 过 度 又 会 带 来 
资源 的 浪费 。 因 此 ,测试 需要 找到 一 个 平衡 点 。 

以 下 是 各 种 测试 方法 选择 的 综合 策略 ,可 在 实际 应 用 过 程 中 参考 。 

(1) 首先 进行 等 价 类 划分 ,包括 输入 条 件 和 输出 条 件 的 等 价 划 分 ,将 无 限 测试 变 成 有 
限 测试 ,这 是 减少 工作 量 和 提高 测试 效率 的 最 有 效 方法 。 

(2) 在 任何 情况 下 都 必须 使 用 边界 值 分 析 方法 。 经 验 表 明 用 这 种 方法 设计 出 测试 用 
例 发 现 程序 错误 的 能 力 最 强 。 

(3) 对 照 程序 逻辑 ,检查 已 设计 出 的 测试 用 例 的 逻辑 覆盖 程度 。 如 果 没 有 达到 要 求 
的 覆盖 标准 ,应 当 再 补充 足够 的 测试 用 例 。 

(4) 如 果 程 序 的 功能 说 明 中 含有 输入 条 件 的 组 合 情 况 , 则 应 在 一 开始 就 选用 因果 
图 法 。 
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小 结 


测试 用 例 的 设计 方法 不 是 单独 存在 的 ,具体 到 每 个 测试 项 目 里 都 会 用 到 多 种 方法 。 
每 种 类 型 的 软件 有 各 自 的 特点 ,每 种 测试 用 例 设计 的 方法 也 有 各 自 的 特点 ,针对 不 同 软件 
如 何 利用 这 些 黑 盒 方法 是 非常 重要 的 。 在 实际 测试 中 ,往往 是 综合 使 用 各 种 方法 才能 有 
效 提高 测试 效率 和 测试 覆盖 度 ,这 就 需要 认真 掌握 这 些 方法 的 原理 ,积累 更 多 的 测试 经 
验 , 以 有 效 提高 测试 水 平 。 


习 题 


1. 叙述 黑 盒 测试 技术 的 实质 及 要 点 。 

2. 常用 的 黑 盒 测试 用 例 设计 方法 有 哪些 ? 各 有 什么 优 缺点 ? 
4 
5 


使 用 等 价 类 划分 法 设计 三 角形 问题 的 测试 用 例 。 


. 程序 要 求 某 个 输入 为 6 位 正 整 数 , 试 用 不 同 的 测试 方法 设计 所 有 的 测试 用 例 。 
. 测试 银行 提 款 机 上 的 提 款 功能 ,要 求 用 户 输入 的 提 款 金额 的 有 效 数值 为 50 一 


2000 ,并 以 50 为 最 小 单位 ( 即 取款 金额 为 50 的 倍数 ), 且 小 数 点 后 为 00, 除 小 数 点 外 ,不 
可 以 出 现 数字 以 外 的 任何 符号 和 文字 。 试 用 等 价 类 划分 法 和 边界 值 分 析 法 设计 测试 


用 例 。 


6. 


某 程序 要 求 输 入 日 期 ,规定 变量 month ,day .year 的 取 值 范围 为 : 1month 志 12， 


1 三 day 志 31,1958 志 year 志 2058, 试 用 边界 值 分 析 法 设计 测试 用 例 。 
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本 章 概述 
白 盒 测试 是 软件 测试 实践 中 最 为 有 效 和 实用 的 方法 之 一 。 白 盒 测试 是 基于 程序 的 测 
试 ,检测 产品 的 内 部 结构 是 否 合理 以 及 内 部 操作 是 否 按 规定 执行 ,覆盖 测试 与 路 径 测 试 是 


试 方法 ,并 通过 实例 说 明 如 何 实际 运用 白 盒 测试 技术 。 
4.1 逻辑 覆盖 测试 


白 盒 测试 技术 的 常见 方法 之 一 就 是 覆盖 测试 , 它 是 利用 程序 的 逻辑 结构 设计 相应 的 
测试 用 例 。 测 试 人 员 要 深入 了 解 被 测 程序 的 逻辑 结构 特点 ,完全 掌握 源 代 码 的 流程 ,才能 
设计 出 恰当 的 用 例 。 根 据 不 同 的 测试 要 求 ,覆盖 测试 可 以 分 为 语句 覆盖 、 判 断 材 盖 、 条 件 
覆盖 .判断 /条 件 覆 盖 、 条 件 组 合 覆 盖 和 路 径 覆 盖 。 

下 面 是 一 段 简单 的 C 语言 程序 ,作为 公共 程序 段 来 说 明 6 种 覆盖 测试 各 自 的 

程序 4-1: 

Hf (x>100&& y>500) then 


1 

2 score 一 Score 十 1 
3 If (x>=1000 
4 


z>5000) then 


Score 一 Score 十 5 


逻辑 运算 符 “&&.” 表 示 “ 与 ”的 关系 ,人 逻辑 运算 符 “|1” 表 示 “ 或 ”的 关系 。 其 程序 控制 
流程 图 如 图 4-1 所 示 。 
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Ex>100)N\(y>500) 
C 


b Score=score+1 


(x>=1000)V(z> 5000) 
e 


d Score=score+5 


图 4-1 程序 流程 图 


4.1.1 语句 覆盖 

语句 覆盖 (Statement Coverage) 是 指 设计 若干 个 测试 用 例 ,程序 运行 时 每 个 可 执行 语 
名 至 少 被 执行 一 次 。 在 保证 完成 要 求 的 情况 下 ,测试 用 例 的 数目 越 少 越 好 。 

以 下 是 针对 公共 程序 段 设计 的 两 个 测试 用 例 , 称 为 测试 用 例 组 1: 

Test Case 1: x 一 2000,y 王 600,z 一 6000 

Test Case 2: x=900,y=600,z=5000 

如 表 4-1 所 示 , 采 用 Test Case 1 作为 测试 用 例 , 则 程序 按 路 径 ac,e 顺序 执行 ,程序 中 
的 4 个 语句 都 被 执行 一 次 ,符合 语句 覆盖 的 要 求 。 采 用 Test Case 2 作为 测试 用 例 , 则 程序 
按 路 径 a,c,d 顺序 执行 ,程序 中 的 语句 4 没有 执行 到 ,所 以 没有 达到 语句 覆盖 的 要 求 。 


表 4-1 测试 用 例 组 1 


(x>100)and (x> =1000)or 
测试 用 例 xyy,z 执行 路 径 
了 (y>500) (z>5000) 
Test Case 1 2000.600,6000 True True ace 
Test Case 2 900,600,5000 True False acd 


从 表面 上 看 ,语句 覆盖 用 例 测试 了 程序 中 的 每 一 个 语句 行 ,好 像 对 程序 覆盖 得 很 全 
面 ,但 实际 上 语句 覆盖 测试 是 最 弱 的 逻辑 覆盖 方法 。 例 如 ,如 果 第 一 个 判断 的 逻辑 运算 符 


了 
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“&.&.” 错 误 写成 “11”, 或 者 第 二 个 判断 的 逻辑 运算 符 “|1” 错 误 写成 “&&”, 这 时 如 果 采 用 
Test Case 1 测试 用 例 是 检验 不 出 程序 中 的 判断 逻辑 错误 的 。 如 果 语 句 3“If (x 二 二 1000|| 
z 之 5000) then” 错 误 的 写成 “If (x 这 二 15001| z 盖 5000) then”,Test Case 1 同样 无 法 发 现 
错误 之 处 。 

根据 上 述 分 析 可 知 , 语 句 覆 盖 测 试 只 是 表面 上 的 覆盖 程序 流程 ,没有 针对 源 程序 各 个 
语句 间 的 内 在 关系 ,设计 更 为 细致 的 测试 用 例 。 
4.1.2 判断 覆盖 

判断 覆盖 (Branch Coverage) 是 指 设计 若干 个 测试 用 例 ,执行 被 测试 程序 时 ,程序 中 
每 个 判断 条 件 的 真 值 分 支 和 假 值 分 支 至 少 被 执行 一 遍 。 在 保证 完成 要 求 的 情况 下 ,测试 
用 例 的 数目 越 少 越 好 。 判 断 覆 盖 又 称 为 分 支 覆 盖 。 

测试 用 例 组 2 : 

Test Case 1: x=2000,y=600,z=6000 

Test Case 3: x=50,y=600,z=2000 

如 表 4-2 所 示 , 采 用 Test Case 1 作为 测试 用 例 , 程 序 按 路 径 ayc,e 顺序 执行 ; 采用 
Test Case 3 作为 测试 用 例 ,程序 按 路 径 a,b,d 顺序 执行 。 所 以 采用 这 一 组 测试 用 例 , 公 
共 程 序 段 的 4 个 判断 分 支 b,c.d,e 都 被 覆盖 到 了 。 

表 4-2 测试 用 例 组 2 


(x>100)and (x> =1000)or 
| i 村 哆 权 
测试 用 例 Xaysz CSOD C0000) 执行 路 径 
Test Case 1 2000,600,6000 True True ace 
Test Case 3 50,600,2000 False False abd 


测试 用 例 组 3: 

Test Case 4: x=2000,y=600,z=2000 

Test Case 5: x=2000, y=200, z=6000 

如 表 4-3 所 示 , 采 用 Test Case 作为 测试 用 例 , 程 序 按 路 径 a, c,d 顺序 执行 ; 采用 
Test Case 5 作为 测试 用 例 ,程序 按 路 径 a,b,e 顺序 执行 。 显 然 采 用 这 组 测试 用 例 同样 可 
以 满足 判断 覆盖 。 


表 4-3 测试 用 例 组 3 


(x>100)and (x> =1000)or 
测试 用 例 Xsys2 执行 路 径 
由 (y>500) (z>5000) 
Test Case 4 2000,600,2000 True False acd 


Test Case 5 2000,200,6000 False True abe 
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实际 上 ,测试 用 例 组 2 和 测试 用 例 组 3 不 仅 达到 了 判断 覆盖 要 求 ,也 同时 满足 了 语句 
覆盖 要 求 。 某 种 程度 上 可 以 说 判断 覆盖 测试 要 强 于 语句 覆盖 测试 。 但 是 ,如 果 将 第 二 个 
判断 条 件 ((x 盖 =1000)or (z 盖 5000)) 中 的 z5000 错误 定义 成 z 的 其 他 限定 范围 ,由 于 
判断 条 件 中 的 两 个 判断 式 是 “或 ”的 关系 ,其 中 一 个 判断 式 错误 是 不 影响 结果 的 ,所 以 这 两 
组 测试 用 例 是 发 现 不 了 问题 的 。 因 此 ,应 该 用 具有 更 强 逻 辑 履 盖 能 力 的 覆盖 测试 方法 来 
测试 这 种 内 部 判断 条 件 。 
4.1.3 条 件 覆 盖 

条 件 覆 盖 (CCondition Coverage) 是 指 设计 若干 个 测试 用 例 ,执行 被 测试 程序 时 ,程序 
中 每 个 判断 条 件 中 的 每 个 判断 式 的 真 值 和 假 值 至 少 被 执行 一 遍 。 

测试 用 例 组 4: 

Test Case 1: x=2000,y=600,z=6000 

Test Case 3: x=50,y=600,z=2000 

Test Case 5: x 一 2000,y 王 200,z 一 6000 

如 表 4-4 所 示 ,把 前 面 设计 过 的 测试 用 例 挑选 出 Test Case 1 ,Test Case 3,Test Case 5 组 
合成 测试 用 例 组 4, 组 中 的 3 个 测试 用 例 覆 盖 了 4 个 内 部 判断 式 的 8 种 真 假 值 情况 。 同 
时 这 组 测试 用 例 也 实现 了 判断 覆盖 。 但 是 并 不 可 以 说 判断 覆盖 是 条 件 覆 盖 的 子 集 。 

测试 用 例 组 5: 

Test Case 6: 50,600,6000 

Test Case 7: 2000,200,1000 

如 表 4-5(a) 和 表 4-5(b) 所 示 , 其 中 表 4-5(a) 表 示 每 个 判断 条 件 的 每 个 判断 式 的 真 值 
和 假 值 , 表 4-5(Cb) 表 示 每 个 判断 条 件 的 真 值 和 假 值 。 测 试用 例 组 5 中 的 2 个 测试 用 例 虽 
然 覆 盖 了 4 个 内 部 判断 式 的 8 种 真 假 值 情况 ,但 是 这 组 测试 用 例 的 执行 路 径 是 abe, 仅 仅 
覆盖 了 判断 条 件 的 4 个 真 假 分 支 中 的 2 个 。 所 以 ,需要 设计 一 种 能 同时 满足 判断 覆盖 和 
条 件 覆 盖 的 覆盖 测试 方法 , 即 判 断 /条 件 覆 盖 测 试 。 

表 4-4 测试 用 例 组 4 


测试 用 例 xyy*Z (x>100) (y>>500) | (x=1000) | 〈(z>5000) | 执行 路 径 
Test Case 1 |2000,600,.6000 True True True False ace 
Test Case 3 |50,.600.2000 False True False False abd 


Test Case 5 |2000,200,6000 True False True True abe 


表 4-5(a) 测试 用 例 组 5 


测试 用 例 xyy,z (x>100) (y>500) | (x=1000) | 〈(z>5000) | 执行 路 径 


Test Case 6 |50,600.6000 False True False True abe 


Test Case 7 |2000,200,1000 True False True False abe 


IE 


了 
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(x>100)and (x> =1000)or 
测试 用 ,y， 执行 路 径 
例 ee (y>500) (z>5000) 
Test Case 6 50,600.6000 False True abe 


Test Case 7 2000,200,1000 False True abe 


4.1.4 判断 /条 件 覆盖 

判断 /条 件 覆 盖 是 指 设计 若干 个 测试 用 例 ,执行 被 测试 程序 时 ,程序 中 每 个 判断 条 件 
的 真 假 值 分 支 至 少 被 执行 一 遍 ,并 且 每 个 判断 条 件 内 部 的 判断 式 的 真 假 值 分 支 也 要 被 执 
行 一 遍 。 

测试 用 例 组 6: 

Test Case 1: x=2000, y=600, z=2000 

Test Case 6: x 一 2000，y 一 200，z 一 6000 

Test Case 7: x=2000, y=600, z=2000 

Test Case 8: x=50, y=200, z=2000 

如 表 4-6(a) 和 表 4-6(b) 所 示 , 其 中 表 4-6(a) 表 示 每 个 判断 条 件 的 每 个 判断 式 的 真 值 
和 假 值 , 表 4-6(b) 表 示 每 个 判断 条 件 的 真 值 和 假 值 。 测 试用 例 组 6 虽然 满足 了 判断 覆盖 
和 条 件 覆 盖 , 但 是 没有 对 每 个 判断 条 件 的 内 部 判断 式 的 所 有 真 假 值 组 合 进行 测试 。 条 件 
组 合 判断 是 必要 的 ,因为 条 件 判断 语句 中 的 “与 " 即 and 和 “或 ” 即 or 会 使 内 部 判断 式 之 间 
产生 抑制 作用 。 例 如 ,c 二 a and b 中 ,如 果 a 为 假 值 ,那么 < 就 为 假 值 ,测试 程序 就 不 检测 
b 了 ,b 的 正确 与 否 就 无 法 测试 了 。 同 样 ,c=a or b 中 ,如 果 a 为 真 值 ,那么 c 就 为 真 值 , 测 
试 程序 也 不 检测 b 了 ,b 的 正确 与 否 也 就 无 法 测试 了 。 

表 4-6(a) 测试 用 例 组 6 


测试 用 例 xyy,Zz (x>100) (y>500) | (x 这 =1000) | (z>5000) | 执行 路 径 
Test Case 1 |2000,600,6000 True True True True ace 
Test Case 8 |50,200.2000 False False False False abd 


表 4-6(b) 测试 用 例 组 6 


(x>100)and (x> =1000)or 
测试 用 例 Xyy，Z 执行 路 径 
(y>500) (z>5000) 
Test Case 1 2000,600,6000 True True ace 
Test Case 8 50,200,2000 False False abd 


4.1.5 条 件 组 合 覆 盖 
条 件 组 合 覆盖 是 指 设计 若干 个 测试 用 例 ,执行 被 测试 程序 时 ,程序 中 每 个 判断 条 件 的 
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内 部 判断 式 的 各 种 真 假 组 合 可 能 都 至 少 被 执行 一 遍 。 可 见 , 满 足 条 件 组 合 覆 盖 的 测试 用 
例 组 一 定 满足 判断 覆盖 条件 覆 盖 和 判断 /条 件 覆 盖 。 

测试 用 例 组 7 : 

Test Case 1: x=2000, y=600, z=2000 

Test Case 6: x=2000, y=200, z=6000 

Test Case 7: x=2000, y=600, z=2000 

Test Case 8: x=50, y=200, z=2000 

如 表 4-7(a) 和 表 4-7(b) 所 示 , 其 中 表 4-7(a) 表 示 每 个 判断 条 件 的 每 个 判断 式 的 真 值 
和 假 值 , 表 4-7(b) 表 示 每 个 判断 条 件 的 真 值 和 假 值 。 测 试用 例 组 7 虽然 满足 了 判断 覆 
盖 、 条 件 覆 盖 以 及 判断 /条 件 覆 盖 ,但 是 并 没有 履 盖 程序 控制 流 图 中 全 部 的 4 条 路 径 (ace， 
abe,abe,abd) ,只 履 盖 了 其 中 3 条 路 径 (ace,abe,abd)。 软 件 测试 的 目的 是 尽 可 能 地 发 现 
所 有 软件 缺陷 ,因此 程序 中 的 每 一 条 路 径 都 应 该 进行 相应 的 覆盖 测试 ,从 而 保证 程序 中 的 
每 一 个 特定 的 路 径 方案 都 能 顺利 运行 ,能够 达到 这 样 要 求 的 是 路 径 覆 盖 测 试 。 

表 4-7(a) 测试 用 例 组 7 


测试 用 例 xyy，Zz (x>100) (y>500) | (x 二 =1000) | (z>>5000) | 执行 路 径 
Test Case 1 |2000,600,6000 True True True True ace 
Test Case 6 |50,600,6000 False True False True abe 
Test Case 7 |2000,200,1000 True False True False abe 


Test Case 8 |50,200,2000 False False False False abd 


表 4-7(b) ”测试 用 例 组 7 
(x>100)and (x> =1000)or 


首 汪 用 全 ee (y>500) (z>5000) 执行 路 径 
Test Case 1 2000,600,6000 True True ace 
Test Case 6 50,600,6000 False True abe 
Test Case 7 2000,200,1000 False True abe 
Test Case 8 50,200,2000 False False abd 


4.1.6 路径 覆 盖 

路 径 覆 盖 (Path Coverage) 要 求 设计 若干 测试 用 例 , 执 行 被 测试 程序 时 ,能 够 覆盖 程 
序 中 所 有 的 可 能 路 径 。 

测试 用 例 组 8 : 

Test Case 1: x=2000,y=600,z=6000 

Test Case 3: x=50,y=600,z=2000 

Test Case 4: x=2000,y=600,z=2000 
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Test Case 7: x=2000,y=200,z=1000 
如 表 4-8(a) 和 表 4-8(b) 所 示 ,其 中 表 4-8(a) 表 示 每 个 判断 条 件 的 每 个 判断 式 的 真 值 
和 假 值 , 表 4-8(b) 表 示 每 个 判断 条 件 的 真 值 和 假 值 。 测 试用 例 组 8 可 以 达到 路 径 覆 盖 。 


表 4-8(a) 测试 用 例 组 8 


测试 用 例 Xyyz (x>100) (Cy>500) | (Cx=1000) | (z>5000) | 执行 路 径 
Test Case 1 |2000,600,6000 True True True True ace 
Test Case 3 |50,600,2000 False True False False abd 
Test Case 4 |2000,600,2000 True True True False acd 
Test Case 7 |2000,200,1000 True False True False abe 


表 4-8(b) 测试 用 例 组 8 


测试 用 例 Be > ng (x> =1000)or 执行 路 径 
(y>500) (z>5000) 
Test Case 1 2000,600,6000 True True ace 
Test Case 3 50,600,2000 False False abd 
Test Case 4 2000,600,2000 True True acd 
Test Case 7 2000,200,1000 False True abe 


应 该 注意 的 是 ,上 面 6 种 覆盖 测试 方法 所 引用 的 公共 程序 只 有 短 短 4 行 ,是 一 段 非常 
简单 的 示例 代码 。 然 而 在 实际 测试 程序 中 ,一 个 简短 的 程序 ,其 路 径 数目 是 一 个 庞大 的 数 
字 。 要 对 其 实现 路 径 覆 盖 测 试 是 很 难 的 。 所 以 ,路 径 覆 盖 测 试 是 相对 的 ,要 尽 可 能 把 路 径 
数 压 缩 到 一 个 可 承受 范围 。 

当然 ,即便 对 某 个 简短 的 程序 段 做 到 了 路 径 覆 盖 测 试 ,也 不 能 保证 源 代码 不 存在 其 他 
软件 问题 了 。 其 他 的 软件 测试 手段 也 必要 的 ,它们 之 间 是 相辅相成 的 。 没 有 一 个 测试 方 
法 能 够 找 尽 所 有 软件 缺陷 ,只 能 说 是 尽 可 能 多 地 查找 软件 缺陷 。 


4.2 路 径 分 析 测 试 


着 眼 于 路 径 分 析 的 测试 称 为 路 径 分 析 测 试 。 完 成 路 径 测试 的 理想 情况 是 做 到 路 径 覆 
盖 。 路 径 覆 盖 也 是 白 盒 测 试 最 为 典型 的 问题 。 独 立 路 径 选择 和 Z 路 径 覆 盖 是 两 种 常见 
的 路 径 覆 盖 方法 。 

4.2.1 控制 流 图 

盒 测试 是 针对 软件 产品 内 部 逻辑 结构 进行 测试 的 ,测试 人 员 必 须 对 测试 中 的 软件 
有 深入 的 理解 ,包括 其 内 部 结构 、 各 单元 部 分 及 之 间 的 内 在 联系 ,还 有 程序 运行 原理 等 。 
因而 这 是 一 项 庞大 并 且 复 杂 的 工作 。 为 了 更 加 突出 程序 的 内 部 结构 ,便于 测试 人 员 理 解 
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源 代码 ,可 以 对 程序 流程 图 进行 简化 ,生成 控制 流 图 (Control Flow Graph)。 简 化 后 的 控 
制 流 图 是 由 结 点 和 控制 边 组 成 的 。 


1. 控制 流 图 的 特点 

控制 流 图 有 以 下 几 个 特点 : 

(1) 具有 惟一 入 口 结 点 , 即 源 结 点 ,表示 程序 段 的 开始 语句 ，; 

(2) 具有 惟一 出 口 结 点 , 即 汇 结 点 ,表示 程序 段 的 结束 语句 ; 

(3) 结 点 由 带 有 标号 的 圆圈 表示 ,表示 一 个 或 多 个 无 分 支 的 源 程序 语句 ; 
(4) 控制 边 由 带 箭头 的 直线 或 弧 表 示 ,代表 控制 流 的 方向 。 

常见 的 控制 流 图 如 图 4-2 所 示 。 


"2? 


顺序 语句 。 For/While 循 环 语句 。” Until 循 环 语句 


2 2 


If 条 件 语句 Case 条 件 语句 
图 4-2 常见 的 控制 流 图 


包含 条 件 的 结 点 被 称 为 判断 结 点 ,由 判断 结 点 发 出 的 边 必须 终止 于 某 一 个 结 点 。 


2. 程序 环 路 复杂 性 
程序 的 环 路 复杂 性 是 一 种 描述 程序 逻辑 复杂 度 的 标准 ,该 标准 运用 基本 路 径 方 法 ,给 
出 了 程序 基本 路 径 集中 的 独立 路 径 条 数 , 这 是 确保 程序 中 每 个 可 执行 语句 至 少 执行 一 


所 必需 的 测试 用 例 数 目的 上 界 。 
给 定 一 个 控制 流 图 G, 设 其 环形 复杂 度 为 V(G) ,在 这 里 介绍 三 种 常见 的 计算 方法 来 
求解 VCG) 。 


(1) V(G)==E 一 N+2, 其 中 是 控制 流 图 G 中 边 的 数量 ,N 是 控制 流 图 中 结 点 的 数目 。 
(2) V(G) 二 P 十 1, 其 中 PP 是 控制 流 图 G 中 判断 结 点 的 数目 。 


区 
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(3) V(G) 二 A, 其 中 人 A 是 控制 流 图 G 中 区 域 的 数目 。 由 边 和 结 点 围 成 的 区 域 叫 做 区 
域 , 当 在 控制 流 图 中 计算 区 域 的 数目 时 ,控制 流 图 外 的 区 域 也 应 记 为 一 个 区 域 。 
4.2.2 ”独立 路 径 测试 

从 前 面 学 过 的 4. 1 节 人 逻辑 覆盖 测试 中 可 知 ,对 于 一 个 较为 复杂 的 程序 要 做 到 完全 的 
路 径 覆 盖 测 试 是 不 可 能 实现 的 。 既 然 路 径 覆 盖 测 试 无 法 达到 ,那么 可 以 对 某 个 程序 的 所 
有 独立 路 径 进 行 测试 ,也 就 是 说 检验 了 程序 的 每 一 条 语句 ,从 而 达到 语句 覆盖 ,这 种 测试 
方法 就 是 独立 路 径 测 试 方法 。 从 控制 流 图 来 看 ,一 条 独立 路 径 是 至 少 包 含有 一 条 在 其 他 
独立 路 径 中 从 未 有 过 的 边 的 路 径 。 路 径 可 以 用 控制 流 图 中 的 结 点 序列 来 表示 。 

例如 ,在 如 图 4-3 所 示 的 控制 流 图 中 ,一 组 独立 的 路 径 是 

path 1: 1 一 11 

path 2: 1 一 2 一 3 一 4 一 5 一 10 一 1 一 1 


4X| 


后 策反 

path 4: 1 一 2 一 3 一 6 一 7 一 9 一 10 一 1 一 11 

路 径 path 1,path 2,path 3,path 4 组 成 了 控制 流 图 的 一 个 基本 路 径 集 。 
O 


图 4-3 控制 流 图 示例 


白 盒 测试 可 以 设计 成 基本 路 径 集 的 执行 过 程 。 通 常 ,基本 路 径 集 并 不 惟一 确定 。 
独立 路 径 测 试 的 步 又 包括 3 个 方面 : 

。 导出 程序 控制 流 图 

。 求 出 程序 环形 复杂 度 

。 设计 测试 用 例 (Test Case) 
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下 面 通过 一 个 C 语言 程序 实例 来 具体 说 明 独 立 路 径 测试 的 设计 流程 。 这 段 程序 是 


统计 一 行 字符 中 有 多 少 个 单词 ,单词 之 间 用 空格 分 隔 开 。 


程序 4-2: 
main () 
{ 
int numl=0, num2=0, score=100; 
int 1; 


1 

2 

3 

4 

5 char str; 
6 scanf ("%d, We\n", Bi, Bstr); 
本 

8 

9 


while (i=5) 
{ 
让 (str 一 'T') 

10 numl ++ ; 
11 else if (str= 'F') 
12 { 
13 score= score—10; 
14 num2++ ; 
15 } 
16 i++ 
17 } 


18 printf ("numl= %d, num2=%d, score=%d\n", numl, num2, score); 


19 3 


1. 导出 程序 控制 流 图 

根据 源 代码 可 以 导出 程序 的 控制 流 图 ,如 图 4-4 
所 示 。 每 个 圆圈 代表 控制 流 图 的 结 点 ,可 以 表示 一 个 
或 多 个 语句 。 圆 圈 中 的 数字 对 应 程序 中 某 一 行 的 编 
号 。 箭 头 代 表 边 的 方向 , 即 控制 流 方向 。 


2. 求 出 程序 环形 复杂 度 

根据 程序 环形 复杂 度 的 计算 公式 , 求 出 程序 路 径 
集合 中 的 独立 路 径 数目 。 

公式 1: V(G)=10 一 8 十 2, 其 中 10 是 控制 流 图 G 
中 边 的 数量 ,8 是 控制 流 图 中 结 点 的 数目 。 

公式 2: V(G)=3 十 1, 其 中 3 是 控制 流 图 G 中 判 
断 结 点 的 数目 。 

公式 3: V(G)=4, 其 中 4 是 控制 流 图 G 中 区 域 的 


/名 


图 4-4 程序 4-2 的 控制 流 图 


了 
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数目 。 


因此 ,控制 流 图 G 的 环形 复杂 度 是 4。 就 是 说 至 少 需要 4 条 独立 路 径 组 成 基本 路 径 
集合 ,并 由 此 得 到 能 够 覆盖 所 有 程序 语句 的 测试 用 例 。 
3. 设计 测试 用 例 
根据 上 面 环 形 复杂 度 的 计算 结果 , 源 程序 的 基本 路 径 集合 中 有 4 条 独立 路 径 : 


path 1: 7 一 18 
path 2: 7 一 9 一 10 一 16 一 7 一 18 


at 有 35 7-»9==11—>15=*»16>7->18 


path 4: 7 一 9 一 11 一 13 一 14 一 15 一 16 一 7 一 18 


根据 上 述 4 条 独立 路 径 , 设 计 了 测试 用 例 组 9, 如 表 4-9 所 示 。 测 试用 例 组 9 中 的 
4 个 测试 用 例 作为 程序 输入 数据 ,能 够 遍历 这 4 条 独立 路 径 。 对 于 源 程 序 中 的 循环 体 , 测 


试用 例 组 9 中 的 输入 数据 使 其 执行 零 次 或 一 次 。 


表 4-9 测试 用 例 组 9 


测试 用 例 - 村 执行 路 径 
1 str numl num2 score 
Test Case 1 5 5 0 0 100 路 径 1 
Test Case 2 4 Es 1 0 100 路 径 2 
Test Case 3 4 ne 0 0 100 路 径 3 
Test Case 4 4 sp 0 i 90 路 径 4 


注意 : 如 果 程 序 中 的 条 件 判 断 表达 式 是 由 一 个 或 多 个 逻辑 运算 符 (and,or,not) 连 接 


的 复合 条 件 表达 式 , 则 需要 变换 为 一 系列 只 有 单个 条 件 的 嵌 套 的 判断 。 
程序 4-3: 


if (a or b) 


then 


1 
2 
3 
4 else 
5 
6 


对 应 的 控制 流 图 如 图 4-5 所 示 ,程序 行 1 的 a,b 都 
是 独立 的 判断 结 点 ,还 有 程序 行 4 也 是 判断 结 点 ,所 以 共 
计 3 个 判断 结 点 。 图 4-5 的 环形 复杂 度 为 V(G) 王 3 十 1， 


procedure x 


procedure y; 


其 中 3 是 图 4-5 中 判断 结 点 的 数目 。 


图 4-5 程序 4-3 的 控制 流 图 
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4.2.3 Z 路 径 履 盖 测 试 

和 独立 路 径 选 择 一 样 ,Z 路 径 覆 盖 也 是 一 种 常见 的 路 径 覆 盖 方 法 。 可 以 说 Z 路径 

盖 是 路 径 履 盖 面 的 一 种 变 体 。 对 于 语句 较 少 的 简单 程序 ,路 径 覆 盖 是 具有 可 行 性 

的 。 但 是 对 于 源 代 码 很 多 的 复杂 程序 ,或 者 对 于 含有 较 多 条 件 语句 和 较 多 循环 体 的 程 
序 来 说 ,需要 测试 的 路 径 数 目 会 成 倍增 长 ,达到 一 个 巨大 数字 ,以 至 于 无 法 实现 路 径 
覆盖 。 

为 了 解决 这 一 问题 ,必须 舍弃 一 些 不 重要 的 因素 ,简化 循环 结构 ,从 而 极 大 地 减少 路 
径 的 数量 ,使 得 覆盖 这 些 有 限 的 路 径 成 为 可 能 。 采 用 简化 循环 方法 的 路 径 覆 盖 就 是 Z 路 
径 履 盖 。 所 谓 简化 循环 就 是 减少 循环 的 次 数 。 不 考虑 循环 体 的 形式 和 复杂 度 如 何 , 也 不 
考虑 循环 体 实际 上 需要 执行 多 少 次 ,只 考虑 通过 循环 体 零 次 和 一 次 这 两 种 情况 。 这 里 的 
零 次 循环 是 指 跳 过 循环 体 , 从 循环 体 的 入 口 直 接 到 循环 体 的 出 口 。 通 过 一 次 循环 体 是 指 
检查 循环 初始 值 。 

根据 简化 循环 的 思路 ,循环 要 么 执行 ,要 么 跳 过 ,这 和 判定 分 支 的 效果 是 一 样 的 。 可 
见 , 简 化 循环 就 是 将 循环 结构 转变 成 选择 结构 。 

如 图 4-6(a) 和 图 4-6(b) 所 示 表 示 了 两 种 最 典型 的 循环 控制 结构 。 图 4-6(a) 是 先 比 
较 循 环 条 件 后 执行 循环 体 ,循环 体 B 可 能 执行 也 可 能 不 被 执行 。 假 设 限 定 循环 体 B 执行 
零 次 和 一 次 ,这 样 就 和 图 4-6(c) 的 条 件 结构 一 样 了 。 图 4-6(b) 是 先 执行 循环 体 后 比较 循环 
条 件 。 假 设 循环 体 B 被 执行 一 次 ,再 经 过 条 件 判 断 跳出 循环 ,那么 其 效果 就 和 图 4-6(c) 
的 条 件 结 构 只 执行 右 分 支 的 效果 一 样 了 。 


(a) (b) (9 
图 4-6 循环 结构 和 条 件 结构 


一 旦 将 循环 结构 简化 为 选择 结构 后 ,路 径 的 数量 将 大 大 减少 ,这 样 就 可 以 实现 路 径 柳 
盖 测 试 了 。 对 于 实现 简化 循环 的 程序 ,可 以 将 程序 用 路 径 树 来 表示 。 当 得 到 某 一 程序 的 
路 径 树 后 ,从 其 根 结 点 开始 ,一 次 遍历 ,再 回 到 根 结 点 时 ,将 所 经 历 的 叶子 结 点 名 排列 起 
来 ,就 得 到 一 个 路 径 。 如 果 已 经 遍历 了 所 有 叶子 结 点 , 那 就 得 到 了 所 有 的 路 径 。 当 得 到 所 
有 的 路 径 后 ,生成 每 个 路 径 的 测试 用 例 ,就 可 以 实现 Z 路 径 覆 盖 测 试 。 


区 


软件 测试 教程 


4.3 其 他 白 盒 测试 方法 


白 盒 测 试 除 了 覆盖 测试 和 路 径 分 析 测试 两 大 类 方法 之 外 ,还 有 很 多 其 他 常见 的 测试 
方法 ,如 循环 测试 ,变异 测试 .程序 插 装 等 。 这 些 方法 相辅相成 ,可 以 增强 测试 效果 ,提高 
4.3.1 循环 测试 

循环 测试 是 一 种 着 重 循环 结构 有 效 性 测试 的 白 盒 测试 方法 。 循 环 结构 测试 用 例 的 设 
计 有 以 下 4 种 模式 ,分别 如 图 4-7(a) 图 4-7(b) .图 4-7(c) .图 4-7(d) 所 示 。 


(a) 简单 循环 (b) 颈 套 循环 


: 


(c) 串 接 循环 (d) 非 结 构 循环 
图 4-7 循环 测试 的 模式 


他 


fr 


1. 简单 循环 
对 于 图 47(a) 所 示 的 简单 循环 ,设计 测试 用 例 时 ,有 以 下 几 种 测试 集 情况 ,其 中 是 
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可 以 通过 循环 体 的 最 大 次 数 : 

(1) 零 次 循环 : 跳 过 循环 体 ,从 循环 入 口 到 出 口 ; 

(2) 通过 一 次 循环 体 : 检查 循环 初始 值 ; 

(3) 通过 两 次 循环 体 : 检查 两 次 循环 ; 

(4) m 次 通过 循环 体 (m 二 n) : 检查 多 次 循环 ; 

(5) n,n 一 1,n 十 1 次 通过 循环 体 : 检查 最 大 次 数 循 环 以 及 比 最 大 次 数 多 一 次 . 少 一 次 
的 循环 。 


2. 入 套 循环 

对 于 图 4-7(b) 所 示 的 艇 套 循 环 , 如 果 采 用 简单 循环 中 的 测试 集 来 测试 骨 套 循环 ,可 
能 的 测试 数目 就 会 随 着 嵌 套 层 数 的 增加 成 几何 级 地 增长 。 这 样 的 测试 是 无 法 实现 的 。 所 
以 ,要 减少 测试 数目 。 

(1) 对 最 内 层 循 环 按 照 简单 循环 的 测试 方法 进行 测试 ,把 其 他 外 层 循环 设置 为 最 
小 值 ; 

(2) 逐步 外 推 ,对 其 外 面 一 层 的 循环 进行 测试 。 测 试 时 保持 本 次 循环 的 所 有 外 层 循 
环 仍 取 最 小 值 , 而 由 本 层 循环 散 套 的 循环 取 某 些 “ 典 型 " 值 ; 

(3) 反复 进行 (2) 中 操作 ,向 外 层 循环 推进 ,直到 所 有 各 层 循环 测试 完毕 。 

3. 串 接 循环 

对 于 图 4-7(c) 所 示 的 串 接 循 环 , 如 果 串 接 循环 的 循环 体 之 间 是 彼此 独立 的 ,那么 可 以 
采用 简单 循环 的 测试 方法 进行 测试 。 如 果 串 接 循 环 的 循环 体 之 间 有 关联 ,例如 前 一 个 循 
环 体 的 结果 是 后 一 个 循环 体 的 初始 值 ,那么 需要 应 用 嵌 套 循环 的 测试 方法 进行 测试 。 

4. 非 结 构 循环 

对 于 图 4-7(d) 所 示 的 非 结构 循 环 ,不 能 进行 测试 ,需要 重新 设计 出 结构 化 的 程序 后 
再 进行 测试 。 
4.3.2 变异 测试 

变异 测试 是 一 种 故障 驱动 测试 , 即 针 对 某 一 类 特定 程序 故障 进行 的 测试 ,变异 测试 也 
是 一 种 比较 成 熟 的 排 错 性 测试 方法 。 它 可 以 通过 检验 测试 数据 集 的 排 错 能 力 来 判断 软件 
测试 的 充分 性 。 

那么 程序 变异 以 及 变异 测试 到 底 是 什么 呢 ? 

假设 对 程序 P 进行 一 些微 小 改动 而 得 到 程序 MP ,程序 MP 就 是 程序 P 的 一 个 变异 
体 。 假 设 程序 P 在 测试 集 T 上 是 正确 的 ,设计 某 一 变异 体 集合 : M 二 {MP|MP 是 P 的 变 
异体 } ,车 变异 体 集合 M 中 的 每 一 个 元 素 在 上 都 存在 错误 , 则 认为 源 程序 P 的 正确 度 
较 高 ,否则 若 M 中 的 某 些 元 素 在 T 上 运行 正确 , 则 可 能 存在 以 下 一 些 情况 
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。 M 中 的 这 些 变 异体 在 功能 上 与 源 程序 P 是 等 价 的 ; 

。 现 有 的 测试 数据 不 足以 找 出 源 程 序 P 与 其 变异 体 之 间 的 差别 ; 

。 源 程序 P 可 能 产生 故障 ,而 其 某 些 变异 体 却 是 正确 的 。 

可 见 ,测试 集 工 和 变异 体 集 合 M 中 的 每 一 个 变异 体 MP 的 选择 都 是 很 重要 的 ,它们 
会 直接 影响 变异 测试 的 测试 效果 。 

那么 如 何 建立 变异 体 呢 ? 变异 体 是 变异 运算 作用 在 源 程序 上 的 结果 。 被 测试 的 源 程 
序 经 过 变异 运算 会 产生 一 系列 不 同 的 变异 体 。 例 如 ,将 数据 元 素 用 其 他 数据 元 素 替 代 , 将 
常量 值 增加 或 减少 ,改动 数组 分 量 , 变 换 操 作 符 , 蔡 换 或 删除 某 些 语句 等 。 

总 之 ,对 程序 进行 变换 的 方法 多 种 多 样 ,具体 操作 要 靠 测 试 人 员 的 实际 经 验 。 通 过 变 
异 分 析 构 造 测 试 数据 集 的 过 程 是 一 个 循环 过 程 , 当 对 源 程序 及 其 变异 体 进 行 测试 后 , 若 发 
现 某 些 变异 体 并 不 理想 ,就 要 适当 增加 测试 数据 ,直到 所 有 变异 体 达 到 理想 状态 , 即 变异 
体 集 合 中 的 每 一 个 变异 体 在 T 上 都 存在 错误 。 
4.3.3 程序 插 装 

程序 插 装 是 借助 于 在 被 测 程序 中 设置 断 点 或 打印 语句 来 进行 测试 的 方法 ,在 执行 测 
试 的 过 程 中 可 以 了 解 一 些 程序 的 动态 信息 。 这 样 在 运行 程序 时 , 既 能 检验 测试 的 结果 数 
据 , 又 能 借助 插入 语句 给 出 的 信息 掌握 程序 的 动态 运行 特性 ,从 而 把 程序 执行 过 程 中 所 发 
生 的 重要 事件 记录 下 来 。 

程序 插 装 设计 时 主要 考虑 三 方面 因素 : 

。 需要 探测 哪些 信息 ; 

。 在 程序 的 什么 位 置 设立 插 装 点 ; 

。 计划 设置 多 少 个 插 装 点 。 

插 装 技术 在 软件 测试 中 主要 有 以 下 几 个 应 用 ， 

(1) 覆盖 分 析 

程序 插 装 可 以 估计 程序 控制 流 图 中 被 覆盖 的 程度 ,确定 测试 执行 的 充分 性 ,从 而 设计 
更 好 的 测试 用 例 ,提高 测试 覆盖 率 。 

(2) 监控 

在 程序 的 特定 位 置 设立 插 装 点 ,插入 用 于 记录 动态 特性 的 语句 ,用 来 监控 程序 运行 时 
的 某 些 特性 ,从 而 排除 软件 故障 。 

(3) 查找 数据 流 异 常 

程序 插 装 可 以 记录 在 程序 执行 中 某 些 变量 值 的 变化 情况 和 变化 范围 。 掌 握 了 数据 变 
量 的 取 值 状况 ,就 能 准确 地 判断 是 否 发 生 数据 流 异 常 。 虽 然 数据 流 异 常 可 以 用 静态 分 析 
器 来 发 现 ,但 是 使 用 插 装 技术 可 以 更 经 济 更 简便 ,毕竟 所 有 信息 的 获取 是 随 着 测试 过 程 附 
带 得 到 的 。 


4.4 
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实例 设计 


实例 1 运用 逻辑 覆盖 的 方法 测试 程序 
程序 4-4: 


1 
2 
3 
4 


I (x>1&& y=1) then 
z 一 Z#2 

I (x=3|| z>1) then 
yt++; 


运用 逻辑 覆盖 的 方法 设计 测试 用 例 组 ,如 表 4-10 所 示 。 


表 4-10 测试 用 例 组 10 


逻辑 覆盖 方法 测试 用 例 组 执行 路 径 
语句 覆盖 x=3,y=1,z=2 3253,4 
Xx 一 3,y 王 1,z 一 2 1,2,3,4 
判断 覆盖 
2 x=1,y=1;2=1 1,3 
X 一 3,y 一 0,z 一 1 1,3,4 
条 件 履 盖 
x=1,y=1,z=2 L534 
判断 /条 件 材 盖 x=3,y=1,z=2 1,2,3,4 
件 材 盖 
X 一 1,y 一 0,z 一 1 1.3 
x 一 3,y 一 1,z 一 2 1,2,3,4 
Xx 一 3,y 一 0,z 一 1 1.3,4 
条 件 组 合 覆 盖 
站 x=1,y=1,z=2 了 5 
x 一 1,y 一 0,z 一 1 1.3 
x 一 3,y 一 1,z 一 2 1.2,.3,4 
x=33y=0,z=1 i 
路 径 覆 盖 x=2,y=1,z=1 让 
x=1y=12=1 本 


实例 2 运用 路 径 分 析 的 方法 测试 程序 
程序 4-5: 


1 
2 
3 
4 
5 
6 


main () 

{ 

int flag, tl, t2, a=0, b=0; 

scanf ("%d, %d, Hd\n", &flag, Etl, Lt2); 
while (flag>0) 

{ 
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7 a 一 a 十 1; 

8 if (tl=1) 

9 then 

到 -4 

11 b=b+1; 

12 flag=0; 

13 } 

14 else 

15 { 

16 if (t2=1) 

17 then b 一 b 一 1; 
18 else a 一 a 一 2; 
19 flag 一 ; 

20 } 

21 人 

22 printf("?a= %d, b=d%\n", a, b); 
23 } 


程序 4-5 的 流程 图 如 图 4-8 所 示 。 
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图 4-8 程序 4-5 的 流程 图 
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程序 4-5 的 控制 流 图 如 图 4-9 所 示 , 其 中 R1、R2、R3 和 R4 代表 控制 流 图 的 4 个 区 
域 。R4 代表 的 是 控制 流 图 外 的 区 域 , 也 算 作 控 制 流 图 
的 一 个 区 域 。 (Ss) 
下 面 运 用 路 径 分 析 的 方法 设计 测试 用 例 组 。 
(1) 根据 程序 环形 复杂 度 的 计算 公式 , 求 出 程序 (78) 
路 径 集合 中 的 独立 路 径 数目 。 
公式 1, V(G)=11 一 9 十 2, 其 中 10 是 控制 流 图 G Qe) @9 
中 边 的 数量 ,8 是 控制 流 图 中 结 点 的 数目 。 
公式 2; V(G) 一 3 十 1, 其 中 3 是 控制 流 图 G 中 判 | (17) R3 (18) 
断 结 点 的 数 日 。 


Xl 


公式 3: V(G)=4, 其 中 4 是 控制 流 图 G 中 区 域 的 (19) 

数目 。 
因此 ,控制 流 图 G 的 环形 复杂 度 是 4。 R4 (2 
(2) 根据 上 面 环 形 复杂 度 的 计算 结果 , 源 程序 的 


基本 路 径 集 合 中 有 4 条 独立 路 径 : 
path 1: 5 一 22 (2) 


path 2: 5—>7, 8—>11, 12>21->5—>22 六 
path 3: 5>7, 8>16>17—>19—>21-—>5—>22 


path 4s 5->75 8->16->18->19->21->5—>22 
(3) 设计 测试 用 例 组 11 如 表 4-11 所 示 。 根 据 上 述 4 条 独立 路 径 设计 出 了 这 组 测试 
用 例 ,其 中 的 4 组 数据 能 够 遍历 各 个 独立 路 径 , 也 就 满足 了 路 径 分 析 测 试 的 要 求 。 
需要 注意 的 是 ,对 于 源 程序 中 的 循环 体 , 测 试用 例 组 11 中 的 输入 数据 使 其 执行 零 次 
或 一 次 。 
表 4-11 测试 用 例 组 11 


输 ”入 期 望 输出 | 
测试 用 例 执行 路 径 
flag tl t2 并 b 
Test Case 1 0 1 1 0 0 路 径 1 
Test Case 2 1 lL 0 1 bh 路 径 2 
Test Case 3 1 0 1 证 二 证 路 径 3 
Test Case 4 1 0 0 = 0 路 径 4 


了 
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小 结 
白 盒 测试 是 基于 被 测 程序 的 源 代 码 设计 测试 用 例 的 测试 方法 。 常 见 的 白 盒 测试 方法 
有 逻辑 覆盖 测试 和 路 径 分 析 测 试 两 大 类 。 


在 巡 辑 覆盖 测试 中 ,按照 覆盖 策略 由 弱 到 强 的 严格 程度 ,介绍 了 语句 覆盖 判断 覆盖 、 
条 件 覆 盖 、 判 断 / 条 件 覆 盖 、 条 件 组 合 覆 盖 和 路 径 覆 盖 6 种 覆盖 测 策略 。 

。 语句 覆盖 : 每 个 语句 至 少 执行 一 次 。 

。 判定 覆盖 : 在 语句 覆盖 的 基础 上 ,每 个 判定 的 每 个 分 支 至 少 执行 一 次 。 

。 条 件 覆 盖 : 在 语句 覆盖 的 基础 上 ,使 每 个 判定 表达 式 的 每 个 条 件 都 取 到 各 种 可 能 
的 结果 。 
判定 /条 件 覆 盖 : 即 判 定 覆盖 和 条 件 覆 盖 的 交集 。 

。 条 件 组 合 覆 盖 : 每 个 判定 表达 式 中 条 件 的 各 种 可 能 组 合 都 至 少 出 现 一 次 。 

。， 路 径 覆 盖 : 每 条 可 能 的 路 径 都 至 少 执行 一 次 ,车 图 中 有 环 , 则 每 个 环 至 少 经 过 

= 次: 

在 路 径 分 析 测 试 中 ,介绍 了 独立 路 径 测 试 和 Z 路 径 覆 盖 测 试 两 种 常用 方法 。 

。 独立 路 径 测试 方法 把 覆盖 的 路 径 数 压缩 到 一 定 限度 内 ,程序 中 的 循环 体 最 多 只 执 
行 一 次 ,对 程序 中 所 有 独立 路 径 进行 测试 。 它 是 在 程序 控制 流 图 的 基础 上 ,分 析 
控制 构造 的 环 路 复杂 性 ,导出 基本 可 执行 路 径 集合 ,设计 测试 用 例 的 方法 。 设 计 
出 的 测试 用 例 要 保证 程序 的 每 一 个 可 执行 语句 至 少 要 执行 一 次 。 

。Z 路径 覆盖 测试 是 指 采用 简化 循环 的 方法 进行 路 径 覆 盖 测 试 。 被 测 源 程序 中 的 

循环 体 执行 零 次 或 一 次 。 

最 后 ,介绍 了 其 他 一 些 白 盒 测试 方法 。 循 环 测试 是 一 种 着 重 循环 结构 有 效 性 测试 的 
测试 方法 。 变 异 测试 是 一 种 故障 驱动 测试 ,是 针对 某 一 类 特定 程序 故障 进行 的 测试 。 程 
序 捅 装 是 借助 于 在 被 测 程序 中 设置 断 点 或 打印 语句 来 进行 测试 的 方法 ,在 执行 测试 的 过 
程 中 可 以 了 解 一 些 程序 的 动态 信息 。 


习 题 


1. 阐述 白 盒 测试 的 各 种 方法 ,进行 分 析 总 结 。 
2. 分 析 归 纳 逻 辑 覆 盖 测 试 的 6 种 覆盖 策略 各 自 的 特点 。 
3. 简 述 独立 路 径 测试 的 基本 步骤 。 
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4. 对 下 列 C 语言 程序 设计 逻辑 覆盖 测试 用 例 。 


Void test(int X, int A, int B) 
{ 

I (A>1&& B=0) then 
X=X/A 

I (A=2|| X>1) then 
X=X+1s 
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本 章 概述 

软件 测试 的 目的 是 尽 可 能 早 一 些 找 出 软件 缺陷 ,并 确保 其 得 以 修复 。 软 件 测 试 人 员 
不 断 追 求 着 低 成 本 下 的 高 效率 测试 ,而 成 功 的 测试 要 依靠 有 效 的 测试 计划 ,测试 用 例 和 软 
件 测试 报告 ,它们 也 是 测试 过 程 要 解决 的 核心 问题 。 

本 章 主要 介绍 软件 测试 计划 的 制定 ,测试 文档 的 形成 ,测试 用 例 的 设计 以 及 测试 报告 
的 编写 格式 。 


5.1 测试 计划 的 制定 


5.1.1 测试 计划 

软件 测试 是 一 个 有 组 织 有 计划 的 活动 ,应 当 给 予 充分 的 时 间 和 资源 进行 测试 计划 ,这 
样 软件 测试 才能 在 合理 的 控制 下 正常 进行 。 测 试 计 划 (Test Planning) 作 为 测试 的 起 始 步 
又 ,是 整个 软件 测试 过 程 的 关键 管理 者 。 

1. 测试 计划 的 定义 

测试 计划 规定 了 测试 各 个 阶段 所 要 使 用 的 方法 策略 ,测试 环境 、 测 试 通过 或 失败 的 准 
则 等 内 容 。《 ANSI/IEEE 软件 测试 文档 标准 829 一 1983) 将 测试 计划 定义 为 :“ 一 个 叙述 
了 预定 的 测试 活动 的 范围 .途径 、 资 源 及 进度 安排 的 文档 。 它 确认 了 测试 项 被 测 特征 、 测 
试 任务 、 人 员 安 排 , 以 及 任何 偶发 事件 的 风险 。” 

2. 测试 计划 的 目的 和 作用 

测试 计划 的 目的 是 明确 测试 活动 的 意图 。 它 规范 了 软件 测试 内 容 、 方 法 和 过 程 ,为 有 
组 织 地 完成 测试 任务 提供 保障 。 专 业 的 测试 必须 以 一 个 好 的 测试 计划 作为 基础 。 尽 管 测 
试 的 每 一 个 步骤 都 是 独立 的 ,但 是 必须 有 一 个 起 到 框架 结构 作用 的 测试 计划 。 
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3. 测试 计划 书 


测试 计划 文档 化 就 成 为 测试 计划 书 , 包 含 总 体 计划 也 包含 分 级 计划 ,是 可 以 更 新 改进 
的 文档 。 从 文档 的 角度 看 ,测试 计划 书 是 最 重要 的 测试 文档 ,完整 细致 并 具有 远见 性 的 计 
划 书 会 使 测试 活动 安全 顺利 地 向 前 进行 ,从 而 确保 所 开发 的 软件 产品 的 高 质量 。 


4. 测试 计划 的 内 容 

软件 测试 计划 是 整个 测试 过 程 中 最 重要 的 部 分 ,为 实现 可 管理 且 高 质量 的 测试 过 程 
提供 基础 。 测 试 计划 以 文档 形式 描述 软件 测试 预计 达到 的 目标 ,确定 测试 过 程 所 要 采用 
的 方法 策略 。 测 试 计划 包括 测试 目的 、 测 试 范围 .测试 对 象 , 测 试 策 略 、 测 试 任务 、 测 试用 
例 、 资 源 配置 ,测试 结果 分 析 和 度量 以 及 测试 风险 评估 等 ,测试 计划 应 当 足 够 完整 但 也 不 
应 当 太 详尽 。 借 助 软件 测试 计划 ,参与 测试 的 项 目 成 员 , 尤 其 是 测试 管理 人 员 , 可 以 明确 
测试 任务 和 测试 方法 ,保持 测试 实施 过 程 的 顺畅 沟通 ; 跟踪 和 控制 测试 进度 ,应 对 测试 过 
程 中 的 各 种 变更 。 因 此 一 份 好 的 测试 计划 需要 综合 考虑 各 种 影响 测试 的 因素 。 

实际 的 测试 计划 内 容 因 不 同 的 测试 对 象 而 灵活 变化 ,但 通常 来 说 一 个 正规 的 测试 计 
划 应 该 包含 以 下 几 个 项 目 , 也 可 以 看 做 是 通用 的 测试 计划 样本 以 供 参考 : 

。 测试 的 基本 信息 : 包括 测试 目的 .背景 ,测试 范围 等 ; 

。 测试 的 具体 目标 : 列 出 软件 需要 进行 测试 的 部 分 和 不 需要 进行 测试 的 部 分 ; 

。 测试 的 策略 : 测试 人 员 采 用 的 测试 方法 ,如 回归 测试 .功能 测试 .自动 测试 等 ; 

。 测试 的 通过 标准 : 测试 是 否 通过 了 界定 标准 以 及 没有 通过 情况 的 处 理 方法 ; 

。 停 测 标准 : 给 出 每 个 测试 阶段 停止 测试 的 标准 ; 

。 测试 用例 ; 详细 描述 测试 用 例 ,包括 测试 值 测试 操作 过 程 ,测试 期 望 值 等 ; 

。 测试 的 基本 支持 : 测试 所 需 的 硬件 支持 、 自 动 测 试 软件 等 ; 

。 部 门 责任 分 工 : 明确 所 有 参与 软件 管理 .开发 ,测试 技术 支持 等 部 门 的 责任 细则 ; 

。 测试 人 力 资源 分 配 : 列 出 测试 所 需 人 力 资源 以 及 软件 测试 人 员 的 培训 计划 ; 

。 测试 进度 安排 : 制定 每 一 个 阶段 的 详细 测试 进度 安排 表 ; 

。 风险 估计 和 危机 处 理 : 估计 测试 过 程 中 潜在 的 风险 以 及 面临 危机 时 的 解决 办 法 。 

一 个 理想 的 测试 计划 应 该 体现 以 下 几 个 特点 : 

。 在 检测 主要 缺陷 方面 有 一 个 好 的 选择 ; 

。 提供 绝 大 部 分 代码 的 覆盖 率 ; 

。 具 有 灵活 性 ; 

。， 易 于 执行 .回归 和 自动 化 ; 

。 定义 要 执行 测试 的 种 类 ; 

。 测试 文档 明确 说 明 期 望 的 测试 结果 ; 

。 当 缺 陷 被 发 现时 提供 缺陷 核对 ; 
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。 明确 定义 测试 目标 ; 
明确 定义 测试 策略 ; 

。 明确 定义 测试 通过 标准 ; 

。 没有 测试 元 余 ; 

。 确认 测试 风险 ; 

。 文档 化 确定 测试 的 需求 ; 

。 定义 可 交付 的 测试 件 。 

软件 测试 计划 是 整个 软件 测试 流程 工作 的 基本 依据 ,测试 计划 中 所 列 条 目 在 实际 测 
试 中 必须 一 一 执行 。 在 测试 的 过 程 中 , 若 发 现 新 的 测试 用 例 , 就 要 尽早 补充 到 测试 计划 
中 。 若 预先 制定 的 测试 计划 项 目 在 实际 测试 中 不 适用 或 无 法 实现 ,那么 也 要 尽快 对 计划 
进行 修改 ,使 计划 具有 可 行 性 。 
5.1.2 测试 计划 的 制定 和 软件 开发 与 测试 的 关系 


1. 测试 计划 的 制定 

测试 的 计划 与 控制 是 整个 测试 过 程 中 最 重要 的 阶段 , 它 为 实现 可 管理 且 高 质量 的 测 
试 过 程 提供 基础 。 这 个 阶段 需要 完成 的 主要 工作 内 容 是 : 拟定 测试 计划 ,论证 那些 在 开 
发 过 程 中 难于 管理 和 控制 的 因素 ,明确 软件 产品 的 最 重要 部 分 (风险 评估 ) 。 

(1) 概要 测试 计划 

概要 测试 计划 是 在 软件 开发 初期 制定 ,其 内 容 包 括 : 

Q@ 定义 被 测试 对 象 和 测试 目标 ; 

@ 确定 测试 阶段 和 测试 周期 的 划分 ; 

@ 制定 测试 人 员 , 软 .硬件 资源 和 测试 进度 等 方面 的 计划 ; 

@ 明确 任务 与 分 配 及 责任 划分 ; 

@ 规定 软件 测试 方法 .测试 标准 。 比 如 ,语句 覆盖 率 达 到 98% ,三 级 以 上 的 错误 改正 
率 达 98% 等 ; 

@ 所 有 决定 不 改正 的 错误 都 必须 经 专门 的 质量 评审 组 织 同意 ; 

@ 支持 环境 和 测试 工具 等 。 

(2) 详细 测试 计划 

详细 测试 计划 是 测试 者 或 测试 小 组 的 具体 的 测试 实施 计划 , 它 规定 了 测试 者 负责 测 
试 的 内 容 、 测 试 强度 和 工作 进度 ,是 检查 测试 实际 执行 情况 的 重要 标准 。 

详细 测试 计划 的 主要 内 容 有 : 计划 进度 和 实际 进度 对 照 表 ; 测试 要 点 ; 测试 策略 ; 
尚未 解决 的 问题 和 障碍 。 

(3) 制定 主要 内 容 

计划 进度 和 实际 进度 对 照 表 ; 测试 要 点 ; 测试 策略 ; 尚未 解决 的 问题 和 障碍 。 
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(4) 制定 测试 大 纲 ( 用 例 ) 
测试 大 纲 是 软件 测试 的 依据 ,保证 测试 功能 不 被 遗漏 ,并 且 功 能 不 被 重复 测试 ,使 得 
能 合理 安排 测试 人 员 ,使 得 软件 测试 不 依赖 于 个 人 。 
测试 大 纲 包括 : 测试 项 目 ,测试 步骤 ,测试 完成 的 标准 以 及 测试 方式 (手动 测试 或 自 
动 测试 )。 测 试 大 纲 不 仅 是 软件 开发 后 期 测试 的 依据 ,而 且 在 系统 的 需求 分 析 阶 段 也 是 质 
量 保证 的 重要 文档 和 依据 。 无 论 是 自动 测试 还 是 手动 测试 ,都 必须 满足 测试 大 纲 的 要 求 。 
测试 大 纲 的 本 质 : 从 测试 的 角度 对 被 测 对 象 的 功能 和 各 种 特性 的 细 化 和 展开 。 针 对 
系统 功能 的 测试 大 纲 是 基于 软件 质量 保证 人 员 对 系统 需求 规格 说 明 书 中 有 关系 统 功 能 定 
义 的 理解 ,将 其 逐一 细 化 展开 后 编制 而 成 的 。 
测试 大 纲 的 好 处 : 保证 测试 功能 不 被 遗漏 ,使 得 软件 功能 不 被 重复 测试 ,合理 安排 测 
试 人 员 ,使 得 软件 测试 不 依赖 于 个 人 。 测 试 大 纲 不 仅 是 软件 开发 后 期 测试 的 依据 ,而 且 在 
系统 的 需求 分 析 阶 段 也 是 质量 保证 的 重要 文档 和 依据 。 

(5) 制定 测试 通过 或 失败 的 标准 

测试 标准 为 可 观 的 陈述 , 它 指明 了 判断 /确认 测试 在 何 时 结束 ,以 及 所 测试 的 应 用 程序 
的 质量 。 测 试 标准 可 以 是 一 系列 的 陈述 或 对 另 一 文档 (如 测试 过 程 指南 或 测试 标准 ) 的 引用 。 

测试 标准 应 该 指明 ， 

。 确切 的 测试 目标 ; 

。 度量 的 尺度 如 何 建立 ; 

。 使 用 了 哪些 标准 对 度量 进行 评价 。 

(6) 制定 测试 挂 起 标准 和 恢复 的 必要 条 件 

者 明 挂 起 全 部 或 部 分 测试 项 的 标准 ,并 指明 恢复 测试 的 标准 及 其 必须 重复 的 测试 活动 。 

(7) 制定 测试 任务 安排 

明确 测试 任务 ,对 每 项 任务 都 必须 明确 7 个 主题 。 

。 任务 : 用 简洁 的 句子 对 任务 加 以 说 明 ; 

。 方 法 和 标准 : 指明 执行 该 任务 时 ,应 该 采用 的 方法 以 及 所 应 遵守 的 标准 ; 

。 输 入 输出 : 给 出 该 任务 所 必需 的 输入 输出 ; 

。 时 间 安 排 : 给 出 任务 的 起 始 和 持续 时 间 ; 

。 资源 : 给 出 任务 所 需要 的 人 力 和 物力 资源 ; 
风险 和 假设 : 指明 启动 该 任务 应 满足 的 假设 ,以 及 任务 执行 可 能 存在 的 风险 ; 

。 角色 和 职责 : 指明 由 谁 负责 该 任务 的 组 织 和 执行 ,以 及 谁 将 担负 怎样 的 职责 。 

(8) 制定 应 交付 的 测试 工作 产品 

指明 应 交付 的 文档 ,测试 代码 和 测试 工具 ,一般 包括 的 文档 有 : 测试 计划 测试 方案 、 
测试 用 例 .测试 规程 .测试 日 志 、 测 试 总 结 报告 ,测试 输入 与 输出 数据 、 测 试 工具 。 


_ 
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(9) 制定 工作 量 估计 

给 出 前 面 定 义 任务 的 人 力 需 求 和 总 计 。 

(10) 编写 测试 方案 文档 

测试 方案 文档 是 设计 测试 阶段 的 文档 ,指明 为 完成 软件 或 软件 集成 的 特性 测试 而 进 
行 的 设计 测试 方法 的 细节 文档 。 

2. 软件 开发 .软件 测试 与 测试 计划 的 关系 

软件 开发 .软件 测试 与 测试 计划 制定 的 并 行 关系 如 图 5-1 所 示 。 


软件 开发 过 程 测试 计划 制定 
[ 


需求 分 析 


概要 测试 计划 


- = 
功能 设计 


， 
详细 设计 | 一 一 


了 
编码 
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图 5-1 软件 开发 .软件 测试 与 测试 计划 制定 的 并 行 关系 
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5.2 测试 文档 


5.2.1 测试 文档 的 概念 


1. 测试 文档 的 定义 

测试 文档 (Testing Documentation) 记 录 和 描述 了 整个 测试 流程 , 它 是 整个 测试 活动 
中 非常 重要 的 文件 。 测 试 过 程 实施 所 必 备 的 核心 文档 是 : 测试 计划 、 测 试用 例 ( 大 纲 ) 和 
软件 测试 报告 。 


2. 测试 文档 的 重要 性 

软件 测试 是 一 个 很 复杂 的 过 程 , 涉 及 软件 开发 其 他 阶段 的 工作 ,对 于 提高 软件 质量 、 
保证 软件 正常 运行 有 着 十 分 重要 的 意义 ,因此 必须 把 对 测试 的 要 求 .过 程 及 测试 结果 以 正 
式 的 文档 形式 写 下 来 。 软 件 测试 文档 用 来 描述 要 执行 的 测试 及 测试 的 结果 。 可 以 说 , 测 
试 文档 的 编制 是 软件 测试 工作 规范 化 的 一 个 重要 组 成 部 分 。 

软件 测试 文档 不 只 在 测试 阶段 才 开 始 考虑 , 它 应 在 软件 开发 的 需求 分 析 阶 段 就 开 
始 着 手 编制 ,软件 开发 人 员 的 一 些 设计 方案 也 应 在 测试 文档 中 得 到 反映 ,以 利于 设计 
的 检验 。 测 试 文档 对 于 测试 阶段 的 工作 有 着 非常 明显 的 指导 作用 和 评价 作用 。 即 便 
在 软件 投入 运行 的 维护 阶段 ,也 常常 要 进行 再 测试 或 回归 测试 ,这 时 仍 会 用 到 软件 测 
试 文档 。 


3. 测试 文档 的 内 容 

整个 测试 流程 会 产生 很 多 个 测试 文档 ,一 般 可 以 把 测试 文档 分 为 两 类 : 测试 计划 和 
测试 分 析 报告 。 

测试 计划 文档 描述 将 要 进行 的 测试 活动 的 范围 方法 ,资源 和 时 间 进 度 等 。 测 试 计 划 
中 罗列 了 详细 的 测试 要 求 ,包括 测试 的 目的 \ 内 容 、 方 法 .步骤 以 及 测试 的 准则 等 。 在 软件 
的 需求 和 设计 阶段 就 要 开始 制定 测试 计划 ,不 能 在 开始 测试 的 时 候 才 制定 测试 计划 。 通 
常 ,测试 计划 的 编写 要 从 需求 分 析 阶 段 开始 ,直到 软件 设计 阶段 结束 时 才 完 成 。 

测试 报告 是 执行 测试 阶段 的 测试 文档 ,对 测试 结果 进行 分 析 说 明 。 说 明 软 件 经 过 测 
试 以 后 ,结论 性 的 意见 如 何 , 软 件 的 能 力 如 何 , 存 在 哪些 缺陷 和 限制 等 ,这 些 意 见 既 是 对 软 
件 质量 的 评价 ,又 是 决定 该 软件 能 否 交付 用 户 使 用 的 依据 。 由 于 要 反映 测试 工作 的 情况 ， 
自然 应 该 在 测试 阶段 编写 。 

测试 报告 包含 了 相应 的 测试 项 的 执行 细节 。 软 件 测试 报告 是 软件 测试 过 程 中 最 重要 
的 文档 ,记录 问题 发 生 的 环境 ,如 各 种 资源 的 配置 情况 .问题 的 再 现 步骤 以 及 问题 性 质 的 
说 明 。 测 试 报告 更 重要 的 是 还 记录 了 问题 的 处 理 进程 ,而 问题 的 处 理 进程 从 一 定 角度 上 
反映 了 测试 的 进程 和 被 测 软 件 的 质量 状况 以 及 改善 过 程 。 
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《计算 机 软件 测试 文档 编制 规范 ) 国 家 标准 给 出 了 更 具体 的 测试 文档 编制 建议 ,其 中 
包括 以 下 几 个 内 容 。 
测试 计划 : 描述 测试 活动 的 范围 方法、 资源 和 进度 ,其 中 规定 了 被 测试 的 对 象 ， 
被 测试 的 特性 、 应 完成 的 测试 任务 、 人 员 职 责 及 风险 等 。 
。 测试 设计 规格 说 明 : 详细 描述 测试 方法 ,测试 用 例 设 计 以 及 测试 通过 的 准 
则 等 。 
。 测试 用 例 规格 说 明 : 测试 用 例文 档 描述 一 个 完整 的 测试 用 例 的 必 备 因素 ,如 输 
入 .预期 结果 测试 执行 条 件 以 及 对 环境 的 要 求 、 对 测试 规程 的 要 求 等 。 测 试用 例 
的 设计 将 在 5. 3 节 作 详细 介绍 。 
。 测试 步骤 规格 说 明 : 测试 规格 文档 指明 了 测试 所 执行 活动 的 次 序 , 规 定 了 实施 测 
试 的 具体 步骤 。 它 包括 测试 规程 清单 和 测试 规程 列表 两 部 分 。 

。 测试 日 志 : 日 志 是 测试 小 组 对 测试 过 程 所 作 的 记录 。 

。 测试 事件 报告 : 报告 说 明 测试 中 发 生 的 一 些 重要 事件 。 

。 测 试 总 结 报 告 : 对 测试 活动 所 作 的 总 结 和 结论 。 测 试 总 结 报告 的 格式 将 在 5.4 节 

作 具 体 说 明 。 

上 述 测试 文档 中 ,前 4 项 属于 测试 计划 类 文档 ,后 3 项 属于 测试 分 析 报 告 类 文档 。 
5.2.2 软件 生命 周期 各 阶段 的 测试 任务 与 可 交付 的 文档 

通常 软件 生命 周期 可 分 为 以 下 6 个 阶段 : 需求 阶段 功能 设计 阶段 ,详细 设计 阶段 、 
编码 阶段 ,测试 阶段 以 及 运行 /维护 阶段 , 相 邻 两 个 阶段 之 间 可 能 存在 一 定 程度 的 重复 以 
保证 阶段 之 间 的 顺利 衔接 ,但 每 个 阶段 的 结束 是 有 一 定 的 标志 ,例如 已 经 提交 可 交付 文 

1. 需求 阶段 

(1) 测试 输入 

需求 计划 (来 自 开 发 ) 。 

(2) 测试 任务 

。 制定 验证 和 确认 测试 计划 ; 

。 对 需求 进行 分 析 和 审核 ; 

。 分 析 并 设计 基于 需求 的 测试 ,构造 对 应 的 需求 覆盖 或 追踪 矩阵 。 

(3) 可 交付 的 文档 

。 验证 测试 计划 ; 

。 验证 测试 计划 (针对 需求 设计 ); 

。 验证 测试 报告 (针对 需求 设计 )。 
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2. 功能 设计 阶段 

(1) 测试 输入 

功能 设计 规格 说 明 ( 来 自 开发 ) 。 
(2) 测试 任务 

。 功能 设计 验证 和 确认 测试 计划 ; 
。 分 析 和 审核 功能 设计 规格 说 明 ; 
。 可 用 性 测试 设计 ; 

。 分 析 并 设计 基于 功能 的 测试 ,构造 对 应 的 功能 覆盖 和 矩阵; 
。 实施 基于 需求 和 基于 功能 的 测试 。 
(3) 可 交付 的 文档 

。 确认 测试 计划 ; 

。 验证 测试 计划 (针对 功能 设计 ); 
。 验证 测试 报告 (针对 功能 设计 )。 
3. 详细 设计 阶段 

(1) 测试 输入 

详细 设计 规格 说 明 ( 来 自 开发 ) 。 
(2) 测试 任务 

。 详细 设计 验证 测试 计划 ; 

。 分 析 和 审核 详细 设计 规格 说 明 ; 
。 分析 并 设计 基于 内 部 的 测试 。 
(3) 可 交付 的 文档 

。 详细 确认 测试 计划 ; 

。 验证 测试 计划 (针对 详细 设计 ); 
。 验证 测试 报告 (针对 详细 设计 ); 
。 测试 设计 规格 说 明 。 

4. 编码 阶段 

(1) 测试 输入 

代码 (来 自 开 发 ) 。 

(2) 测试 任务 

。 代码 验证 测试 计划 ; 

。 分 析 代 码 ; 

。 验证 代码 ; 

。 设计 基于 外 部 的 测试 ; 
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。 设计 基于 内 部 的 测试 。 
(3) 可 交付 的 文档 

。 测试 用 例 规格 说 明 ; 

。 需求 覆盖 或 追踪 矩阵; 

。 功能 覆盖 矩阵 ; 

。 测试 步骤 规格 说 明 ; 

。 验证 测试 计划 (针对 代码 ); 
。 验证 测试 报告 (针对 代码 ) 。 


5. 测试 阶段 

(1) 测试 输入 

。 要 测试 的 软件 ; 

。 用 户 手 册 。 

(2) 测试 任务 

。 制定 测试 计划 ; 

。 审查 由 开发 部 门 进 行 的 单元 和 集成 测试 ; 

。 进行 功能 测试 

。 进行 系统 测试 ; 

。 审查 用 户 手 册 。 

(3) 可 交付 的 文档 

。 测试 记录 ; 

。 测试 事故 报告 ; 

。 测试 总 结 报告 。 

6. 运行 /维护 阶段 

(1) 测试 输入 

。 已 确认 的 问题 报告 ; 

。 软件 生命 周期 。 软 件 生 命 周期 是 一 个 重复 的 过 程 。 如 果 软 件 被 修改 了 ,开发 和 测 
试 活动 都 要 回归 到 与 修改 相对 应 的 生命 周期 阶段 。 

(2) 测试 任务 

。 监视 验收 测试 ; 

。 为 确认 的 问题 开发 新 的 测试 用 例 ; 

。 对 测试 的 有 效 性 进行 评估 。 

(3) 可 交付 的 文档 

可 升级 的 测试 用 例 库 。 


5.3 测试 用 例 的 设计 


1. 测试 用 例 
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测试 用 例 (Test Case) 是 为 了 高 效率 地 发 现 软件 缺陷 而 精心 设计 的 少量 测试 数据 。 
实际 测试 中 ,由 于 无 法 达到 穷 举 测试 ,所 以 要 从 大 量 输入 数据 中 精 选 有 代表 性 或 特殊 性 的 
数据 来 作为 测试 数据 。 好 的 测试 用 例 应 该 能 发 现 尚 未 发 现 的 软件 缺陷 。 


2. 测试 用 例 的 内 容 


测试 用 例 应 包含 以 下 内 容 : 
(1) 测试 用 例 表 
测试 用 例 表 如 表 5-1 所 示 。 对 其 中 一 些 项 目 做 如 下 说 明 : 


表 5-1 测试 用 例 表 


用 例 编号 


测试 模块 


编制 人 


编制 时 间 


开发 人 员 


程序 版 本 


测试 人 员 


测试 负责 人 


用 例 级 别 


测试 目的 


测试 内 容 


测试 环境 


规则 指定 


执行 操作 


测试 结果 


步骤 


预期 结果 


实测 结果 


备注 


。 测试 项 目 : 指明 并 简单 描述 本 测试 用 例 是 用 来 测试 哪些 项 目 、 子 项 目 或 软件 特 


性 的 。 


。 用 例 编号 : 对 该 测试 用 例 分 配 惟 一 的 标识 号 。 
。 用 例 级 别 : 指明 该 用 例 的 重要 程度 。 测 试用 例 的 级 别 分 为 4 级 : 级 别 1( 基 本 ) ,级 
别 2( 重 要 ) 级别 3( 详 细 ) .级别 4( 生 个 ) 。 


了 
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。 执行 操作 : 执行 本 测试 用 例 所 需 的 每 一 步 操作 。 

。 预期 结果 : 描述 被 测 项 目 或 被 测 特 性 所 希望 或 要 求 达到 的 输出 或 指标 。 

。 实测 结果 : 列 出 实际 测试 时 的 测试 输出 值 ,判断 该 测试 用 例 是 否 通 过 。 

。 备注 。 如 需要 , 则 填写 “特殊 环境 需求 (硬件 ,软件 、 环 境 )”“ 特 殊 测试 步 又 要 求 ”、 
“相关 测试 用 例 ” 等 信息 。 

(2) 测试 用 例 清单 

测试 用 例 清单 如 表 5-2 所 示 。 


表 5-2 ”测试 用 例 清单 


项 目 编号 测试 项 目 子 项 目 编号 | 测试 子 项 目 | 测试 用 例 编号 | 测试 结论 结论 


s.4 测试 总 结 报告 


测试 总 结 报告 主要 包括 测试 结果 统计 表 、 测 试问 题 表 和 问题 统计 表 、 测 试 进度 表 、 测 
1. 测试 结果 统计 表 
测试 结果 统计 表 主 要 是 对 测试 项 目 进行 统计 ,统计 计划 测试 项 和 实际 测试 项 的 数量 ， 
以 及 测试 项 通过 多 少 、 失 败 多 少 等 。 测 试 结果 统计 表 如 表 5-3 所 示 。 
表 5-3 测试 结果 统计 表 


项 目 计划 测试 项 | 实际 测试 项 【Y]J 项 【P] 项 【NJ 项 |[KN/A] 项 | 备注 


数量 
百分比 


其 中 ,【Y] 表 示 测 试 结果 全 部 通过 ,【P] 表 示 测 试 结果 部 分 通过 ,【N] 表 示 测 试 结果 绝 
大 多 数 没 通 过 ,【N/A] 表 示 无 法 测试 或 测试 用 例 不 适合 。 
另外 ,根据 表 5-3, 可 以 按照 下 列 两 个 公式 分 别 计算 测试 完成 率 和 覆盖 率 ,作为 测试 
总 结 报告 的 重要 数据 指标 。 
测试 完成 率 = 实际 测试 项 数量 /计划 测试 项 数量 X100% 
测试 覆盖 率 ==【Y] 项 的 数量 /计划 测试 项 数量 X100% 
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2. 测试 问题 表 和 问题 统计 表 
测试 问题 表 如 表 5-4 所 示 ,问题 统计 表 如 表 5-5 所 示 。 
表 5-4 测试 问题 表 

问题 号 
问题 描述 
问题 级 别 
问题 分 析 与 策略 
避免 措施 
备注 


在 表 5-4 中 ,问题 号 是 测试 过 程 所 发 现 的 软件 缺陷 的 惟一 标号 ,问题 描述 是 对 问题 的 
简要 介绍 ,问题 级 别 在 表 5-5 中 有 具体 分 类 ,问题 分 析 与 策略 是 对 问题 的 影响 程度 和 应 对 
的 策略 进行 描述 ,避免 措施 是 提出 问题 的 预防 措施 。 

表 5-5 问题 统计 表 


问题 程度 严重 问题 一 般 问题 微小 问题 其 他 统计 项 问题 合计 
数量 
百分比 


从 表 5-5 得 出 ,问题 级 别 基 本 可 分 为 严重 问题 一般 问 题 和 微小 问题 。 根 据 测试 结果 
的 具体 情况 ,级别 的 划分 可 以 有 所 更 改 。 例 如 , 若 发 现 极其 严重 的 软件 缺陷 ,可 以 在 严重 
问题 级 别 的 基础 上 ,加 入 特殊 严重 问题 级 别 。 

3. 测试 进度 表 

测试 进度 表 如 表 5-6 所 示 ,用 来 描述 关于 测试 时 间 ,测试 进度 的 问题 。 根 据 表 5-6, 可 
以 对 测试 计划 中 的 时 间 安 排 和 实际 的 执行 时 间 状 况 进行 比较 ,从 而 得 到 测试 的 整体 进度 
情况 。 

表 5-6 测试 进度 表 


测试 项 目 计划 起 始 时 间 | 计划 结束 时 间 | 实际 起 始 时 间 | 实际 结束 时 间 进度 描述 


EU 


4. 测试 总 结 表 
测试 总 结 表 包 括 测试 工作 的 人 员 参 与 情况 和 测试 环境 的 搭建 模式 ,并 且 对 软件 产品 
的 质量 状况 做 出 评价 ,对 测试 工作 进行 总 结 。 测 试 总 结 表 如 表 5-7 所 示 。 
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表 5-7 测试 总 结 表 
项 目 编号 项 目 名 称 


项 目 开 发 经 理 项 目测 试 经 理 


测试 人 员 


测试 环境 (软件 、 硬 件 ) 


软件 总 体 描述 : 


测试 工作 总 结 : 


小 结 


精心 设计 的 测试 计划 是 软件 测试 成 功 与 否 的 关键 步骤 ,在 软件 测试 过 程 中 要 因 情 况 
变化 而 随时 更 改 测试 计划 。 

完善 的 测试 文档 记录 了 整个 测试 活动 过 程 ,能 够 为 测试 工作 提供 有 力 的 文档 支持 ,对 
于 各 个 测试 阶段 都 有 着 非常 明显 的 指导 作用 和 评价 作用 。 测 试 文档 主要 分 为 测试 计划 类 
和 测试 分 析 报 告 类 。 


题 


局 


1. 简 述 测试 计划 的 定义 。 

2. 概括 测试 文档 的 含义 。 

3. 简 述 测试 计划 的 制订 原则 。 

4. 简 述 测试 文档 的 内 容 。 

5. 简 述 软件 生命 周期 各 阶段 的 测试 任务 与 可 交付 的 文档 。 

6. 举例 说 明 测试 用 例 的 设计 方法 。 

7. 选择 一 个 小 型 应 用 系统 ,为 其 做 出 系统 测试 的 计划 书 、 设 计 测试 用 例 并 写 出 测试 
总 结 报告 。 
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本 章 概述 

软件 测试 是 一 项 艰苦 的 工作 ,工作 量 大 ,需要 投入 大 量 的 时 间 和 精力 ,而 完全 的 手工 
测试 已 经 满足 不 了 软件 开发 的 需求 。 软 件 自动 化 测试 应 运 而 生 。 软 件 自动 化 测试 就 是 通 
过 自动 化 测试 工具 或 其 他 手段 ,按照 测试 工程 师 的 预定 计划 进行 自动 地 测试 ,目的 是 减轻 
手工 测试 的 工作 量 , 从 而 达到 提高 软件 质量 的 目的 。 本 章 具 体 介绍 了 手工 测试 和 自动 化 
测试 的 区 别 ,重点 介绍 了 常用 的 自动 化 测试 工具 。 


6.1 软件 自动 化 测试 概述 


软件 自动 化 测试 是 相对 于 手工 测试 而 存在 的 ,主要 是 通过 所 开发 的 软件 测试 工具 、 脚 
本 (Script) 等 来 实现 ,具有 良好 的 可 操作 性 、 可 重复 性 和 高 效率 等 特点 。 测 试 自动 化 是 软 
件 测试 中 提高 测试 效率 、 覆 盖 率 和 可 靠 性 的 重要 测试 手段 ,也 可 以 说 ,测试 自动 化 是 软件 
测试 不 可 分 割 的 一 部 分 。 

和 迭代 式 的 开发 过 程 是 目前 最 流行 的 软件 开发 过 程 。 在 和 迭代 式 开 发 中 强调 在 较 短 的 
时 间 间 隔 中 产生 多 个 可 执行 可 测试 的 软件 版 本 ,这 就 意味 着 测试 人 员 也 必须 为 每 次 
迭代 产生 的 软件 系统 进行 测试 。 测 试 工作 的 周期 被 缩短 了 ,测试 的 频率 增加 了 。 在 这 
种 情况 下 ,手工 测试 已 经 远 远 满足 不 了 软件 开发 的 需求 。 当 第 一 个 可 测试 的 版 本 产生 
后 ,测试 人 员 开 始 对 这 个 版 本 的 系统 进行 测试 ,很 快 第 二 个 版 本 在 第 一 个 版 本 的 技术 
基础 上 产生 了 ,测试 人 员 需 要 在 第 二 次 测试 时 重复 上 次 的 测试 工作 ,还 要 对 新 增加 的 
功能 进行 测试 ,每 经 过 一 个 迭代 ,测试 工作 量 就 会 逐步 累加 。 随 着 软件 开发 过 程 的 进 
展 , 测 试 工作 越 来 越 繁重 ,如 果 使 用 手工 测试 的 方法 ,将 很 难保 证 测试 工作 的 进度 和 质 
量 。 在 这 种 情况 下 .使 用 良好 的 自动 化 测试 工具 势 在 必 行 。 测 试 人 员 可 以 根据 测试 需 
求 完 成 测试 过 程 中 所 需 的 行为 ,使 用 自动 化 测试 工具 自动 生成 测试 脚本 。 在 后 续 的 测 


下 
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试 过程 中 ,只 需要 对 测试 脚本 进行 简单 的 修改 ,就 完全 可 以 重复 使 用 ,而 不 必 手 工 重复 已 
经 测试 过 的 功能 部 分 。 


6.2 自动 化 测试 的 设计 与 开发 


6.2.1 自动 化 测试 的 产生 及 定义 

测试 软件 是 一 项 艰苦 的 工作 ,工作 量 很 大 ,需要 投入 大 量 的 时 间 和 精力 。 据 统计 , 测 
试 工作 会 占用 整个 软件 开发 时 间 的 40% ,对 于 一 些 可 靠 性 要 求 很 高 的 软件 ,测试 时 间 甚 
至 占 到 总 开发 时 间 的 60%。 但 是 ,我 们 知道 ,软件 测试 具有 一 定 的 重复 性 。 通 常 ,如 果 要 
测试 某 项 特性 ,可 能 需要 不 止 一 次 的 测试 ,除了 要 检查 前 面 的 测试 中 发 现 的 软件 故障 和 和 缺 
陷 是 否 得 到 了 修复 和 改进 ,同时 还 要 检查 在 修复 过 程 中 是 否 又 引入 了 新 的 故障 或 者 缺陷 。 
而 此 后 软件 又 不 断 地 升级 ,还 要 进行 很 多 次 的 重复 测试 ,在 这 种 情形 下 ,软件 自动 化 测试 
技术 开始 逐步 产生 ,并 不 断 地 发 展 起 来 。 

自动 化 测试 就 是 希望 通过 自动 化 测试 工具 或 其 他 手段 ,按照 测试 工程 师 的 预定 计划 
进行 自动 地 测试 ,目的 是 减轻 手工 测试 的 工作 量 , 从 而 达到 提高 软件 质量 的 目的 。 

软件 自动 化 测试 是 软件 测试 的 重要 组 成 部 分 , 它 能 完成 许多 手工 测试 无 法 实现 的 或 
者 难以 实现 的 测试 ,甚至 可 以 提供 要 比 手工 测试 更 好 、 更 快 的 测试 执行 方式 ,可 以 省 去 许 
多 繁杂 的 工作 ,节省 大 量 的 测试 时 间 。 实 施 正确 、 合 理 的 自动 化 测试 ,能 够 快速 完整 地 对 
软件 进行 测试 ,从 而 提高 软件 的 质量 ,进而 提高 对 整个 软件 开发 工作 的 质量 ,并 节约 软件 
开发 经 费 , 缩 短 软 件 产品 发 布 的 周期 , 带 来 显著 的 生产 效果 和 经 济 效益 。 
6.2.2 手工 测试 与 自动 化 测试 

虽然 自动 化 测试 是 软件 测试 不 可 分 割 的 一 部 分 ,但 自动 化 测试 并 不 能 完全 取代 手工 
测试 ,二 者 各 有 优 缺 点 。 如 表 6-1 所 示 显 示 了 手工 测试 与 自动 化 测试 的 比较 结果 。 这 个 
测试 案例 中 包括 1750 个 测试 用 例 和 700 多 个 错误 。 


表 6-1 自动 化 测试 和 手工 测试 比较 


测试 步 又 手工 测试 自动 化 测试 通过 使 用 工具 改善 测试 的 百分比 (%) 
测试 计划 的 开发 32 40 一 25 
测试 用 例 的 开发 262 117 55 
测试 执行 466 23 95 
测试 结果 分 析 117 58 50 
错误 状态 /更 正 检 测 117 23 80 
产生 报告 96 16 83 
时 间 总 和 1090 277 75 
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通过 表 6-1 可 以 看 出 ,自动 化 测试 与 手工 测试 在 很 多 方面 都 有 很 大 的 不 同 , 在 执行 测 
试 和 产生 测试 报告 方面 显得 尤为 突出 。 

通常 手工 测试 的 目的 着 重 于 发 现 新 的 软件 故障 ,而 自动 化 测试 的 目的 则 着 重 于 发 现 
旧 的 软件 故障 。 


1. 手工 测试 的 局 限 性 

测试 人 员 在 进行 手工 测试 时 ,具有 创造 性 ,可 以 举一反三 ,从 一 个 测试 用 例 想到 另外 
一 些 测 试用 例 ,特别 是 可 以 考虑 到 测试 用 例 不 能 覆盖 的 一 些 特殊 的 或 边界 的 情况 。 同 时 ， 
对 于 那些 复杂 的 逻辑 判断 .界面 是 否 友好 ,手工 测试 具有 明显 的 优势 。 但 是 手工 测试 在 某 
些 测 试 方面 ,可 能 还 存在 着 一 定 的 局 限 性 。 包括: 

(1) 通过 手工 测试 无 法 做 到 覆盖 所 有 代码 路 径 。 

(2) 简单 的 功能 性 测试 用 例 在 每 一 轮 测试 中 都 不 能 少 ,而 且 具 有 一 定 的 机 械 性 ,重复 
性 。 其 工作 量 往往 较 大 ,无 法 体现 手工 测试 的 优越 性 。 

(3) 许多 与 时 序 、 死 锁 、 资 源 冲 突 、 多 线程 等 有 关 的 错误 通过 手工 测试 很 难 捕捉 到 。 

(4) 在 系统 负载 ,性 能 测试 时 ,需要 模拟 大 量 数据 或 大 量 并 发 用 户 等 各 种 应 用 场合 
时 ,也 很 难 通过 手工 测试 来 进行 。 

(5) 在 进行 系统 可 靠 性 测试 时 ,需要 模拟 系统 运行 十 年 、 几 十 年 ,以 验证 系统 能 否 稳 
定 运行 ,这 也 是 手工 测试 无 法 模拟 的 。 

(6) 如 果 有 大 量 的 测试 用 例 , 需 要 在 短 时 间 内 完成 ,手工 测试 几乎 不 可 能 做 到 。 

(7) 测试 可 以 发 现 错误 ,并 不 能 表明 程序 的 正确 性 。 因 为 不 论 黑 盒 测试 . 白 盒 测试 的 
方式 都 不 能 实现 穷 举 测试 。 对 一 些 关键 程序 , 则 需要 考虑 利用 数学 归纳 法 或 谓词 演算 等 
进行 证 明 。 

2. 自动 化 测试 的 好 处 

由 于 手工 测试 的 局 限 性 ,软件 测试 借助 测试 工具 极为 必要 ,并 向 软件 测试 全 面 自动 化 
方向 发 展 ,将 测试 工具 和 软件 测试 自动 化 结合 起 来 ,解决 手工 测试 的 局 限 性 。 好 的 自动 化 
测试 可 以 达到 比 手 工 测试 更 有 效 .更 经 济 的 效果 。 自 动 化 测试 的 优点 如 下 : 

(1) 对 程序 的 新 版 本 运行 回归 测试 。 对 于 产品 型 的 软件 ,每 发 布 一 个 新 的 版 本 ,其 中 大 
部 分 功能 和 界面 都 和 上 一 个 版 本 相似 或 完全 相同 ,这 部 分 功能 可 用 已 有 的 测试 , 即 回归 测 
试 。 新 版 本 的 测试 特别 适合 于 自动 化 测试 ,从 而 达到 可 以 重新 测试 每 个 功能 的 目的 。 这 是 
最 主要 的 任务 ,特别 是 经 过 了 频繁 的 修改 后 ,一 系列 回归 测试 的 开销 是 最 小 的 。 假 设 已 经 有 
一 个 测试 在 程序 的 一 个 老 版 本 上 运行 过 ,那么 在 几 分 钟 之 内 就 可 以 选择 并 执行 自动 化 测试 。 

(2) 可 以 运行 更 多 更 频繁 的 测试 。 自 动 化 测试 的 最 大 好 处 就 在 于 ,可 以 在 较 少 的 时 
间 内 运行 更 多 的 测试 。 例 如 ,产品 的 发 布 周期 是 3 个 月 ,在 测试 期 间 要 求 每 天 或 每 2 天 就 
要 发 布 一 个 版 本 供 测试 人 员 测 试 ,一 个 系统 的 功能 点 有 几 千 个 或 几 万 个 ,如 果 使 用 人 工 测 
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试 来 完成 这 么 多 烦琐 的 工作 ,将 需要 花费 大 量 的 时 间 ,难以 提高 测试 效率 。 

(3) 可 以 进行 一 些 手工 测试 难以 完成 或 不 可 能 完成 的 测试 。 有 些 非 功能 性 方面 的 测 
试 ,如 压力 测试 、 并 发 测试 .大 数据 量 测试 .崩溃 性 测试 ,手工 测试 是 不 可 能 实现 的 。 例 如 ， 
对 于 200 个 用 户 的 联机 系统 ,用 手工 进行 并 发 操作 的 测试 几乎 是 不 可 能 的 ,但 用 自动 化 测 
试 工具 就 可 以 模拟 来 自 200 个 用 户 的 输入 。 客 户 端 用 户 通过 定义 可 以 自动 回放 的 测试 ， 
随时 都 可 以 运行 用 户 脚本 ,技术 人 员 即 使 不 了 解 整个 内 容 复 杂 的 商业 应 用 也 可 以 胜任 。 
另外 ,在 测试 中 应 用 测试 工具 ,可 以 发 现 正常 测试 中 很 难 发 现 的 缺陷 。 例 如 ,Numega 的 
DevPartner 工具 就 可 以 发 现 软件 中 的 内 存 方面 的 问题 。 

(4) 充分 地 利用 资源 。 将 频繁 的 测试 任务 自动 化 ,如 需要 重复 输入 数据 的 测试 。 这 
样 可 以 将 测试 人 员 解 脱出 来 ,提高 准确 性 和 测试 人 员 的 积极 性 ,把 更 多 的 精力 投入 到 测试 
用 例 的 设计 当中 。 由 于 使 用 了 自动 化 测试 ,手工 测试 就 会 减少 ,相对 来 说 测试 人 员 就 可 以 
把 更 多 的 精力 投入 到 手工 测试 过 程 中 ,有 助 于 更 好 地 完成 手工 测试 。 另 外 ,测试 人 员 还 可 
以 利用 夜间 或 周末 及 其 空闲 的 时 候 执行 自动 化 测试 。 

(5) 测试 具有 一 致 性 和 可 重复 性 。 由 于 每 次 自动 化 测试 运行 的 脚本 是 相同 的 ,所 以 每 
次 执行 的 测试 具有 一 致 性 ,很 容易 发 现 被 测 软件 是 否 有 修改 之 处 。 这 在 手工 测试 中 是 很 难 
做 到 的 。 另 外 ,好 的 自动 化 测试 机 制 还 可 以 确保 测试 标准 与 开发 标准 的 一 致 性 。 

(6) 测试 具有 复 用 性 。 但 对 于 一 些 要 重复 使 用 的 自动 化 测试 要 确保 其 可 靠 性 。 

(7) 缩短 软件 发 布 的 时 间 。 一 旦 一 系列 自动 化 测试 准备 工作 完成 ,就 可 以 重复 地 执 
行 一 系列 的 测试 ,因此 能 够 缩短 测试 时 间 。 

(8) 增强 软件 的 可 靠 性 。 


3. 自动 化 测试 的 局 限 性 

上 面 列举 的 是 自动 化 测试 的 优点 。 既 然 自动 化 测试 有 这 么 多 的 优点 , 那 是 不 是 手工 
测试 就 可 以 省 略 了 呢 ? 答案 是 否定 的 。 自 动 化 测试 并 不 能 完全 取代 手工 测试 。 因 为 与 任 
何事 物 一 样 ,自动 化 测试 也 有 它 的 不 完美 之 处 。 自 动 化 测试 的 缺点 如 下 : 

(1) 并 非 所 有 的 测试 都 可 以 用 自动 化 测试 来 实现 。 最 简单 的 一 个 例子 就 是 软件 的 使 
用 性 能 测试 。 软 件 的 使 用 性 能 测试 必须 要 求 能 够 判断 所 测试 的 软件 是 否 符合 人 们 对 一 般 
软件 使 用 时 形成 的 习惯 及 共识 ,而 这 一 点 是 自动 化 测试 无 法 做 得 到 的 ,因为 它 没有 人 类 的 
感官 ,又 比如 操作 系统 或 网 络 的 设置 测试 ,兼容 性 测试 ,这 些 采用 手工 测试 比较 合适 ,因为 
许多 因素 都 是 随机 的 ,必须 由 测试 人 员 通 过 判断 来 执行 。 

(2) 新 的 软件 缺陷 越 多 ,自动 化 测试 失败 的 几率 就 越 大 。 发 现 更 多 的 新 的 软件 缺陷 
应 该 是 手工 测试 的 主要 目的 。 测 试 专家 James Bach 认为 85% 的 软件 缺陷 靠 手 工 测试 来 
发 现 , 而 自动 化 测试 只 能 发 现 15% 的 软件 缺陷 。 其 实 自 动 化 测试 能 够 很 好 地 发 现 原来 就 
有 的 软件 缺陷 。 

(3) 技术 问题 .组 织 问题 .脚本 维护 问题 。 自 动 化 测试 实施 起 来 并 不 简单 。 首 先 , 商 
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用 测试 执行 工具 是 较 庞 大 且 复 杂 的 产品 ,要 求 具有 一 定 的 技术 知识 ,才能 很 好 地 利用 工 
具 , 这 对 于 厂商 或 分 销 商 培训 直接 使 用 工具 的 用 户 , 特 别 是 自动 化 测试 用 户 来 说 十 分 重 
要 。 除 工具 本 身 的 技术 问题 外 ,用 户 也 要 了 解 被 测试 软件 的 技术 问题 。 如 果 软 件 在 设计 
和 实现 时 没有 考虑 可 测试 性 , 则 测试 时 无 论 是 采用 自动 化 测试 还 是 手工 测试 难度 都 非常 
大 。 如 果 使 用 工具 测试 这 样 的 软件 ,无 疑 更 增加 测试 的 难度 。 其 次 ,还 必须 有 管理 支持 及 
组 织 艺 术 。 最 后 ,还 要 考虑 组 织 是 否 能 够 重视 ,是 否 能 成 立 这 样 的 测试 团队 ,是 否 有 这 样 
的 技术 水 平 , 当 测试 脚本 的 维护 工作 量 很 大 时 ,是 否 值得 维护 等 问题 。 

(4) 测试 工具 与 其 他 软件 的 互 操作 性 。 测 试 工具 与 其 他 软件 的 互 操作 性 也 是 一 个 严 
重 的 问题 ,技术 环境 变化 如 此 之 快 ,使 得 厂商 很 难 跟 上 。 许 多 工具 看 似 理 想 , 但 在 某 些 环 
境 中 却 并 非 如 此 。 


4. 自动 化 测试 的 适用 情况 

综 上 所 述 ,自动 化 测试 与 手工 测试 各 有 优 缺 点 ,应 该 是 互补 .并 存 的 。 既 然 是 这 样 , 究 
竞 哪些 测试 应 该 编 成 自动 测试 程序 呢 ? 根据 自动 化 测试 的 特点 来 看 ,以 下 的 测试 应 该 优 
先 考虑 编写 成 自动 测试 : 

(1) 回归 测试 。 回 归 测 试 是 用 于 保证 软件 某 一 时 期 的 质量 水 平 .验证 某 些 缺陷 已 被 
修复 及 修复 并 没有 影响 到 软件 其 他 部 分 。 由 于 回归 测试 是 软件 每 次 有 新 版 本 出 来 的 时 候 
都 必须 执行 的 ,也 就 是 在 软件 的 生命 周期 中 会 被 反复 执行 的 测试 ,因此 这 类 测试 很 适合 编 
成 自动 化 测试 。 

(2) 设计 大 量 不 同 数据 输入 的 功能 测试 。 如 各 种 各 样 的 边界 值 测试 ,过 程 宛 长 需要 
大 量 时 间 去 完成 的 网 页 大 量 链 接 的 测试 等 。 

(3) 用 手工 测试 完成 难度 较 大 的 测试 。 如 性 能 测试 .负载 测试 ,强度 测试 等 。 例 如 ， 
对 于 一 个 网 站 软件 ,要 测试 3000 名 用 户 在 某 一 时 间 内 同时 在 该 网 站 搜索 时 ,服务 器 运行 
是 否 正常 及 速度 是 否 仍 然 可 以 接受 。 这 类 测试 是 手工 测试 难以 完成 的 ,而 采用 相关 的 测 
试 软件 则 很 容易 做 到 。 

6.2.3 测试 工具 的 运用 及 作用 


1. 测试 工具 的 运用 

(1) 测试 用 例 的 生成 

用 编程 语言 或 更 专业 的 脚本 语言 (如 Perl`PHP、Java 等 ) 编 写 出 的 小 程序 来 产生 大 
量 的 测试 输入 ,包括 输入 数据 与 操作 指令 。 或 同时 也 按 一 定 的 逻辑 规律 产生 标准 输出 , 输 
入 与 输出 的 文件 名 字 按 规定 进行 配对 ,使 控制 自动 化 测试 及 结果 的 核对 易于 操作 。 

对 于 测试 用 例 的 命名 ,如 果 在 项 目的 文档 设计 中 做 了 统一 规划 , 则 软件 产品 的 需求 与 
功能 的 命名 方法 将 会 有 利于 后 继 开发 过 程 的 中 间 产 品 的 命名 分 类 。 这 样 ,对 文档 管理 和 
配置 管理 都 会 带 来 很 多 方便 ,使 得 软件 产品 开发 有 条 理 , 符 合 思维 逻辑 。 


了 


软件 测试 教程 


(2) 测试 的 执行 与 控制 

单元 测试 可 能 多 用 于 单机 运行 .但 对 于 系统 测试 或 回归 测试 , 则 可 能 需要 在 多 机 网 络 
环境 下 进行 。 利 用 自动 化 测试 ,无 论 是 单机 运行 还 是 多 机 运行 ,主要 的 功能 和 作用 是 节约 
大 量 时 间 与 人 力 、 物 力 ,提高 效率 并 降低 成 本 。 

对 程序 的 反复 修改 .重新 汇编 和 重新 测试 ,如 果 采 用 手工 方法 所 花费 的 时 间 相 当 可 
观 , 利 用 软件 测试 工具 就 可 节约 大 量 时 间 了 。 

对 于 系统 测试 或 者 回归 测试 这 类 涉及 大 量 测试 个 案 运行 的 情况 ,节约 测试 时 间 策 略 
方法 除了 利用 自动 化 工具 外 ,就 是 如 何 充分 利用 一 切 硬件 资源 ,将 大 量 的 测试 个 案 分 配 到 
各 台 机 器 上 同时 去 运行 (并 行 方式 ) ,并 将 大 量 的 系统 测试 运行 安排 在 夜间 和 周末 进行 。 

(3) 测试 结果 与 标准 输出 的 对 比 

在 设计 测试 用 例 时 ,必须 考虑 到 如 何 能 够 易于 对 测试 结果 实现 标准 输出 。 输 出 数据 
量 的 多 少 及 数据 格式 对 比较 的 速度 将 会 有 直接 的 影响 。 

另 一 方面 ,考虑 输出 数据 与 测试 用 例 的 目标 逻辑 对 应 性 及 易 读 性 。 通 常 需 要 写 一 些 
特殊 的 程序 来 执行 测试 结果 与 标准 输出 的 对 比 工 作 , 因 为 有 的 部 分 输出 内 容 是 不 能 直接 
对 比 的 。 例 如 ,对 运行 的 日 期 时 间 的 记录 、 对 运行 的 路 径 的 记录 以 及 测试 数据 的 版 本 等 。 

(4) 不 吻合 测试 结果 的 分 析 处 理 

用 于 对 测试 结果 与 标准 输出 进行 对 比 的 自动 化 工具 ,往往 也 同时 对 不 吻合 的 测试 结 
果 能 够 进行 分 析 、 分 类 、 记 录 和 报告 工作 。 这 里 : 

Q@ 分 析 是 找 出 不 吻合 的 地 方 并 指出 错误 的 可 能 原因 。 

@ 分 类 包括 各 种 统计 上 的 分 项 。 例 如 ,对 应 的 源 程序 的 位 置 、 错 误 的 严重 级 别 ( 提 
示 ,警告 , 非 实效 性 错误 、 时 效 性 错误 或 其 他 分 类 方法 )。 

@ 记录 是 分 类 的 存档 。 

@ 报告 是 主动 地 对 测试 的 运行 者 及 测试 用 例 责任 人 通报 出 错 的 信息 。 最 直接 的 通 
报 方法 是 由 自动 化 测试 软件 发 出 电子 邮件 给 测试 运行 者 和 测试 用 例 负责 人 。 

(5) 测试 状态 的 统计 和 报表 的 产生 

这 是 运用 自动 化 测试 所 应 完成 的 任务 ,目的 是 提高 过 程 管理 的 质量 ,同时 节约 用 于 产 
生 统 计数 据 的 时 间 。 通 常 自动 化 测试 工具 均 有 此 项 功能 。 

(6) 自动 化 测试 与 开发 中 产品 每 日 构件 的 配合 

自动 化 测试 是 整个 开发 过 程 中 的 一 个 有 机 部 分 。 自 动 化 测试 要 依靠 配置 管理 来 提供 
良好 的 运行 环境 ,同时 与 开发 中 的 软件 构建 紧密 配合 。 通 常 , 在 开发 的 软件 产品 达到 一 定 
程度 时 ,就 要 开始 进行 每 日 测试 。 这 种 方法 能 使 软件 的 开发 状态 得 到 频繁 更 新 ,及 早 发 现 
设计 和 集成 中 的 故障 与 缺陷 。 

(7) 采用 自动 比较 技术 

测试 验证 是 检验 软件 是 否 产生 了 正确 输出 的 过 程 , 是 通过 在 测试 的 实际 输出 与 预期 


第 6 章 软件 自动 化 测试 


输出 (例如 , 当 软 件 正 确 执行 时 的 输出 ) 之 间 完 成 一 次 或 多 次 比较 来 实现 的 。 进 行 测试 自 
动 化 工作 时 ,自动 比较 就 成 为 一 个 必须 的 环节 。 有 计划 地 进行 比较 会 比 随意 的 比较 有 更 
高 的 效率 和 发 现 问题 的 能 力 。 

自动 比较 的 内 容 可 以 是 多 方面 的 ,包括 基于 磁盘 输出 的 比较 ,如 对 数据 文件 的 比较 ; 
基于 界面 输出 的 比较 ,如 对 显示 位 图 的 比较 ; 基于 多 媒体 输出 的 比较 ,如 对 声音 的 比较 ; 
还 包括 其 他 输出 内 容 的 比较 。 

比较 器 可 以 检测 两 组 数据 是 否 相同 ,功能 较 齐 全 的 比较 器 还 可 以 标识 有 差异 的 内 容 。 
但 比较 器 并 不 能 告诉 测试 者 测试 是 否 通 过 或 失败 ,需要 测试 者 自行 判断 。 

比较 也 可 以 是 简单 的 比较 , 仅 匹配 实际 输出 与 预期 输出 是 否 完全 相同 ,这 是 自动 化 比 
较 的 基础 。 智 能 比较 是 允许 用 已 知 的 差异 来 比较 实际 输出 和 预期 输出 。 例 如 ,要 求 比较 
包含 日 期 信息 的 输出 报表 的 内 容 。 如 果 使 用 简单 比较 ,显然 是 不 行 的 ,因为 每 次 生成 报表 
的 日 期 信息 肯定 是 不 同 的 。 这 时 就 需要 智能 比较 ,忽略 日 期 的 差别 ,比较 其 他 内 容 , 甚 至 
还 可 以 忽略 日 期 的 具体 内 容 , 但 比较 日 期 的 格式 , 则 要 求 日 期 按 特定 格式 输出 。 智 能 比较 
需要 使 用 到 较为 复杂 的 比较 手段 ,包括 正则 表达 式 的 搜索 技术 .屏蔽 的 搜索 技术 等 。 


2. 测试 工具 的 作用 

自动 化 测试 工具 可 以 帮助 开发 人 员 和 用 户 了 解 以 下 重要 的 信息 。 

(1) 确定 系统 最 优 的 硬件 配置 : 大 量 的 硬件 如 何 进行 配置 才能 提供 最 好 的 性 能 。 

(2) 检查 系统 的 可 靠 性 : 整个 系统 在 怎样 的 负载 下 能 可 靠 运行 ,运行 的 时 间 有 多 久 ， 
系统 的 性 能 会 如 何 变化 。 

(3) 检查 系统 硬件 和 软件 的 升级 情况 : 软件 和 硬件 对 系统 性 能 的 影响 有 和 多大。 

(4) 评估 新 产品 : 新 的 软件 产品 应 当 采 用 哪些 新 的 硬件 和 软件 才能 支持 运行 。 
6.2.4 ”自动 化 测试 产生 的 问题 

对 测试 工具 能 够 发 挥 的 作用 大 家 都 已 经 很 清楚 了 ,但 是 在 软件 测试 自动 化 的 实施 过 
程 中 还 是 会 遇 到 许多 问题 ,以 下 是 一 些 比较 常见 的 问题 。 


1. 不 现实 的 期 望 

没有 建立 一 个 正确 的 软件 测试 自动 化 观念 ,认为 测试 自动 化 可 以 代替 手工 测试 ,认为 
测试 自动 化 可 以 发 现 大量 新 缺陷 。 实 际 上 ,第 一 次 运行 的 测试 最 有 可 能 发 现 缺陷 ,如 果 再 
次 运行 相同 的 测试 , 则 发 现 缺陷 的 概率 就 小 得 多 。 对 回归 测试 而 言 ,再 次 运行 相同 的 测试 
只 是 确保 修改 是 正确 的 ,并 不 能 发 现 新 的 问题 。 大 多 数 情况 下 ,人 们 对 软件 测试 自动 化 存 
在 过 于 乐观 的 态度 .过 高 的 期 望 ,期 望 通过 这 种 测试 自动 化 的 方案 能 解决 目前 遇 到 的 所 有 
问题 。 但 事实 上 ,如 果 期 望 不 现实 ,无论 测试 工具 如 何 ,都 满足 不 了 期 望 。 


2. 缺乏 测试 的 实践 经 验 
软件 测试 自动 化 不 仅 是 简单 地 使 用 测试 工具 ,还 需要 有 和 良好 的 测试 流程 ,测试 用 例 配 


了 


软件 测试 教程 


合 脚本 的 编写 ,这 就 要 求 测试 人 员 要 很 好 地 掌握 测试 和 编程 技术 。 如 果 缺 乏 测 试 的 实践 
经 验 , 测 试 组 织 较 差 ,测试 发 现 缺陷 的 能 力 较 差 ,那么 首先 要 做 的 是 改进 测试 的 有 效 性 ,而 
不 是 改进 测试 效率 。 只 有 手工 测试 积累 到 一 定 程 度 , 才 能 做 好 自动 化 测试 。 


3. 测试 工具 本 身 的 问题 影响 测试 质量 

自动 测试 工具 本 身 也 是 软件 产品 ,如 果 它 的 质量 得 不 到 保证 ,将 直接 影响 到 测试 结果 
的 正确 性 。 不 同 的 测试 工具 面向 不 同 的 测试 目的 ,具有 各 自 的 特点 和 适用 范围 ,因此 ,一 
定 要 根据 公司 的 现实 情况 来 引入 正确 的 测试 工具 。 一 般 来 说 ,通过 自动 测试 工具 测试 的 
用 例 是 不 需要 再 进行 手工 测试 的 。 将 自动 测试 与 手工 测试 有 效 地 结合 ,并 在 最 终 的 测试 
报告 中 体现 自动 测试 的 结果 是 比较 好 的 方向 。 


4. 存在 安全 性 的 错觉 
如 果 软 件 测试 工具 没有 发 现 被 测 软 件 的 缺陷 ,并 不 能 说 明 软件 中 不 存在 问题 ,可 能 测 
试 工具 本 身 不 够 全 面 或 者 测试 的 预期 结果 设置 错误 。 


5. 自动 测试 的 维护 

当 软 件 修改 后 ,通常 也 需要 修改 部 分 测试 ,这 样 必然 导致 对 自动 化 测试 的 修改 。 在 进 
行 自动 化 测试 的 设计 和 实现 时 ,需要 注意 这 个 问题 ,防止 自动 化 测试 带 来 的 好 处 被 高 维护 
成 本 所 淹没 。 


6.3 常用 自动 化 测试 工具 简介 


随 着 人 们 对 测试 工作 的 重视 以 及 测试 工作 的 不 断 深入 , 越 来 越 多 的 公司 开始 使 用 自 
动 化 测试 工具 。 如 果 能 够 正确 地 选择 和 使 用 自动 化 测试 工具 ,就 会 提高 测试 的 效率 和 测 
试 质量 ,降低 测试 成 本 。 由 于 一 些 商 用 的 自动 化 测试 工具 十 分 昂贵 ,因此 在 选择 自动 化 测 
试 工具 时 ,要 把 各 种 因素 考虑 进去 ,只 有 这 样 才能 做 出 正确 的 选择 。 
6.3.1 自动 化 测试 工具 的 分 类 

根据 测试 方法 的 不 同 , 自 动 化 测试 工具 可 以 分 为 白 盒 测试 工具 、 黑 盒 测 试 工具 和 测试 
管理 工具 。 这 些 工具 主要 是 Mercury Interactive(MI) Segue、IBM/Rational .Compuware 
和 Empirix 等 公司 的 产品 ,而 MI 公司 的 产品 占 了 主流 。 这 些 工具 和 软件 开发 过 程 中 相 
关 活 动 的 关系 如 图 6-1 所 示 。 


1. 白 盒 测试 工具 

白 盒 测试 工具 一 般 是 针对 代码 进行 测试 ,测试 中 发 现 的 缺陷 可 以 定位 到 代码 级 。 
根据 测试 工具 工作 原理 的 不 同 . 白 盒 测 试 工具 又 可 以 分 为 静态 测试 工具 和 动态 测试 
工具 。 
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需求 分 析 验收 测试 
详细 设计 集成 测试 


编码 以 及 i 测试 管理 ] 
单元 测试 白 盒 测试 工具 测试 管理 工具 


图 6-1 测试 工具 与 开发 过 程 关系 图 


(1) 静态 测试 工具 

静态 测试 就 是 在 不 执行 程序 的 情况 下 分 析 软 件 的 特性 。 因 此 ,静态 测试 工具 一 般 是 
对 代码 进行 语法 扫描 , 找 出 不 符合 编码 规范 的 地 方 , 根 据 某 种 质量 模型 评价 代码 的 质量 ， 
生成 系统 的 调用 关系 图 等 。 静 态 测试 工具 直接 对 代码 进行 分 析 , 不 需要 运行 代码 ,也 不 需 
要 对 代码 编译 链接 .生成 可 执行 文件 。 

静态 测试 工具 的 代表 有 Telelogic 公司 的 Logiscope 软件 .PR 公司 的 PRQA 软件 。 

(2) 动态 测试 工具 

动态 测试 直接 执行 被 测 程序 以 提供 测试 活动 。 因 此 ,动态 测试 工具 需要 实际 运行 被 
测 系统 ,并 设置 断 点 ,向 代码 生成 的 可 执行 文件 中 插入 一 些 监测 代码 ,掌握 断 点 这 一 时 刻 
程序 运行 数据 。 

动态 测试 工具 的 代表 有 Compuware 公司 的 DevPartner 软件 .Rational 公司 的 Purify 
软件 。 

常见 的 白 盒 测试 工具 ,如 表 6-2、 表 6-3 所 示 。 


表 6-2 Parasoft 白 盒 测试 工具 集 


工 具 名 支持 语言 环境 简 介 

Jtest Java 代码 分 析 和 动态 类 组件 测 试 
Jcontract Java 实时 性 能 监控 以 及 分 析 优 化 
C++ Test CC++ 代码 分 析 和 动态 测试 
CodeWizard CC++ 代码 静态 分 析 

Insure++ C5CH 实时 性 能 监控 以 及 分 析 优 化 


. test . Net 代码 分 析 和 动态 测试 
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表 6-3 ”Compuware 白 盒 测 试 工具 集 


简 介 


工具 名 支持 语言 环境 

BoundsChecker| C++ ,Delphi 

TrueTime C++ ,Java, Visual Basic 
FailSafe Visual Basic 

Jcheck MS Visual J ++ 
TureCoverage | C++ ,Java, Visual Basic 
SmartCheck Visual Basic 
CodeReview Visual Basic 


2. 黑 盒 测试 工具 
黑 盒 测试 工具 适用 于 系统 功能 测试 和 性 能 测试 ,包括 功能 测试 工具 、` 负 载 测试 工具 、 


API 和 OLE 错误 检查 ,指针 和 泄露 错误 检查 、 内 存 错误 检查 
代码 运行 效率 检查 ,组件 性 能 的 分 析 

自动 错误 处 理 和 恢复 系统 

图 形 化 的 线程 和 事件 分 析 工 具 

函数 调用 次 数 、 所 占 比 率 统计 以 及 稳定 性 跟踪 

函数 调用 次 数 、 所 占 比 率 统计 以 及 稳定 性 跟踪 

自动 源 代码 分 析 工 具 


性 能 测试 工具 等 。 黑 盒 测试 工具 的 一 般 原 理 是 利用 脚本 的 录制 (Record)/ 回 放 
(Playback) ,模拟 用 户 的 操作 ,然后 将 被 测 系统 的 输出 记录 下 来 同 预先 给 定 的 标准 结果 比 
较 。 黑 盒 测 试 工具 可 以 大 大 减轻 黑 盒 测 试 的 工作 量 ,在 迭代 开发 的 过 程 中 ,能 够 很 好 地 进 


行 回归 测试 。 


黑 盒 测试 工具 的 代表 有 Rational 公司 的 TeamTest\Compuware 公司 的 QACenter。 


常见 的 黑 盒 功 能 测试 工具 ,如 表 6-4 所 示 。 
表 6-4 常见 的 黑 盒 功 能 测试 工具 


T 具 名 


公 司 名 


官方 站 点 


WinRunner 
Astra Quicktest 
LoadRunner 
Robot 
TeamTest 
QARun 
QALoad 
SilkTest 
SilkPerformer 
eTest 

e-Load 

WAS 
WebLoad 
OpenSTA 


Mercury Interactive 
Mercury Interactive 
Mercury Interactive 
IBM/Rational 
IBM/Rational 
Compuware 
Compuware 

Segue Software 
Segue Software 
Empirix 

Empirix 

MS 

Radview 

OpenSTA 


http://www. merc-inc. com 

http://www. merc-inc. com 

http://www. merc-inc. com 

http://www-306. ibm. com/software/rational/ 
http://www-306. ibm. com/software/rational/ 
http://compuware. com 

http://compuware. com 

http://www. segue. com 

http://www. segue. com 

http://www. empirix. com 

http://www. empirix. com 

http://www. microsoft. com 

http://www. radview. com 


http://www. opensta. com 
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3. 测试 管理 工具 

测试 管理 工具 用 于 对 测试 进行 管理 。 一 般 而 言 ,测试 管理 工具 负责 对 测试 计划 测试 
用 例 测试 的 实施 进行 管理 。 另 外 ,测试 管理 工具 还 能 实现 对 产品 缺陷 的 跟踪 管理 .产品 
特性 管理 等 。 

测试 管理 工具 的 代表 有 Rational 公司 的 TeamManager、Compuware 公司 的 
TrackRecord、Mercury Interactive 公司 的 TestDirector 等 软件 。 

除 此 之 外 ,还 有 专用 于 性 能 测试 的 工具 包括 有 : Radview 公司 的 WebLoad; 
Microsoft 公司 的 WebStress 等 工具 ; 针对 数据 库 测试 的 TestBytes; 对 应 用 性 能 进行 优 
化 的 EcoScope 等 工具 。 


6.3.2 常见 自动 化 测试 工具 介绍 


1. Rational Robot 

Rational Robot 可 以 对 在 各 种 独立 开发 环境 (IDE) 中 开发 的 应 用 程序 ,创建 ,修改 并 
执行 功能 测试 分布 式 功能 测试 .回归 测试 以 及 整合 测试 ,记录 并 回放 能 识别 业务 应 用 程 
序 对 象 的 测试 脚本 ,可 以 快速 有 效 地 跟踪 .报告 与 质量 保证 测试 相关 的 所 有 信息 ,并 将 这 
些 信 息 绘制 成 图 表 。Robot 的 回归 测试 与 Purify 结合 使 用 可 以 完成 可 靠 性 测试 ,与 
PureCoverage 结合 使 用 可 以 完成 代码 覆盖 计算 ,与 Rational Quantify 结合 使 用 可 以 完成 
应 用 程序 性 能 的 测试 。 

Rational Robot 是 一 个 面向 对 象 的 软件 测试 工具 ,主要 针对 Web、ERP 和 C/S 进行 
功能 自动 化 测试 。 可 以 降低 在 功能 测试 上 的 人 力 和 物力 的 投入 成 本 和 风险 ,测试 包括 可 
见 的 和 不 可 见 的 对 象 。 

Rational Robot 可 以 开发 运用 三 种 测试 脚本 : 用 于 功能 测试 的 GUI 脚本 .用 于 性 能 
测试 的 VU 以 及 VB 脚本 。 

Rational Robot 具有 以 下 功能 和 作用 。 

(1) 执行 完整 的 功能 测试 。 记 录 和 回放 遍历 应 用 程序 的 脚本 以 及 测试 在 查证 点 处 的 
对 象 状态 。 

(2) 执行 完整 的 性 能 测试 。 通 过 Rational Robot 与 Rational Test Manager 的 协作 可 
以 记录 和 回放 脚本 ,这 些 脚 本 帮助 断定 多 客户 系统 在 不 同 负载 情况 下 是 否 能 够 按照 用 户 
定义 的 标准 运行 。 

(3) 在 SQA Basic`VB、VU 多 种 环境 下 创建 并 编辑 脚本 。Rational Robot 编辑 器 提 
供 有 色 代 码 命令 ,并 在 集成 脚本 开发 阶段 提供 键盘 帮助 。 

(4) 测试 微软 IDE 环境 下 VB、HTML、Java、Oracle Forms、PowerBuilder、Delphi 等 
编程 工具 开发 的 应 用 程序 以 及 用 户 界面 上 看 不 见 的 那些 对 象 。 

(5) 脚本 回放 阶段 收集 应 用 程序 诊断 信息 。Rational Robot 与 Rational Purify 
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Quantify PureCoverage 集成 ,可 以 通过 诊断 工具 回放 脚本 ,并 在 日 志 中 查看 结果 。 
由 于 Robot 使 用 面向 对 象 的 记录 技术 , 它 记录 对 象 内 部 的 名 称 而 非 屏幕 坐标 。 因 
此 , 当 对 象 改变 位 置 或 者 窗口 文本 发 生变 化 时 ,Robot 仍然 可 以 找到 对 象 并 进行 回放 。 
(6) 同 Rational 其 他 组 件 或 产品 集成 使 用 Robot。 
。 Rational Administrator: 用 于 集中 管理 Rational 项 目 。 
。 Rational Test Manager 和 Comparators: 用 于 回顾 和 分 析 测 试 结果 。 
。 Rational SiteCheck: 用 于 管理 因特网 和 企业 网 网 页 站 点 。 
。 Rational TestFactory: 测试 应 用 程序 。 
。 Rational ClearQuest: 管理 缺陷 。 
。 Rational TestManager: 测试 性 能 。 
。 Rational RequisitePro: 做 需求 管理 。 


2. WinRunner 

Mercury Interactive 公司 的 WinRunner 是 一 种 企业 级 的 用 于 检验 应 用 程序 是 否 如 
期 运行 的 功能 性 测试 工具 。 通 过 自动 捕获 ,检测 和 模拟 用 户 交 互 的 操作 , WinRunner 能 
够 辨认 缺陷 并 且 确 保 那 些 跨越 多 个 应 用 程序 和 数据 库 的 业务 流程 在 初次 发 布 时 就 能 避免 
出 现 故障 ,并 且 保 持 长 期 可 靠 的 运行 。 

WinRunner 的 特点 在 于 : 与 传统 的 手工 测试 相 比 , 它 能 快速 .批量 地 完成 功能 点 测 
试 ; 能 针对 相同 测试 脚本 ,执行 相同 的 动作 ,从 而 消除 人 工 测试 所 带 来 的 理解 上 的 误差 ; 
此 外 , 它 还 能 重复 执行 相同 动作 ,测试 工作 中 最 枯燥 的 部 分 可 交 由 机 器 完成 ; 它 支 持 程序 
风格 的 测试 脚本 ,一 个 高 素质 的 测试 工程 师 能 借助 它 完成 流程 极为 复杂 的 测试 ,通过 使 用 
通配符 、 宏 .条 件 语句 \ 循 环 语句 等 ,还 能 较 好 地 完成 测试 脚本 的 重用 ; 它 针 对 于 大 多 数 编 
程 语言 和 Windows 技术 ,提供 了 较 好 的 集成 ,支持 环境 ,这 对 基于 Windows 平台 的 应 用 
程序 实施 功能 测试 而 言 带 来 了 极 大 的 便利 。 

WinRunner 具有 如 下 的 主要 功能 : 

(1) 轻松 创建 测试 。 用 WinRunner 创建 一 个 测试 ,只 需 使 用 鼠标 和 键盘 ,完成 一 个 
标准 的 业务 操作 流程 ,WinRunner 自动 记录 操作 并 生成 所 需 的 脚本 代码 ,可 以 直接 修改 
测试 脚本 以 满足 各 种 复杂 测试 的 需求 。 

(2) 插入 检查 点 。 在 记录 一 个 测试 的 过 程 中 ,可 以 插入 检查 点 ,检查 在 某 个 时 刻 / 状 
态 下 ,应 用 程序 是 否 运行 正常 。 在 插入 检查 点 后 . WinRunner 会 收集 一 套数 据 指标 ,在 测 
试 运行 时 对 其 一 一 验证 。WinRunner 可 以 提供 几 种 不 同类 型 的 检查 点 ,包括 文本 、GUI、 
位 图 和 数据 库 。 

(3) 检验 数据 。 除 了 创建 并 运行 测试 ,WinRunner 还 能 验证 数据 库 的 数值 ,从 而 确保 
业务 交易 的 准确 性 。 例 如 ,在 创建 测试 时 ,可 以 设 定 哪些 数据 库 表 和 记录 需要 检测 ; 在 测 
试 运行 时 ,测试 程序 就 会 自动 核对 数据 库 内 的 实际 数值 和 预期 的 数值 。WinRunner 自动 
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显示 检测 结果 ,在 有 更 新 /删除 /插入 的 记录 上 突出 显示 以 引起 注意 。 

(4) 增强 测试 。 为 了 彻底 全 面 地 测试 一 个 应 用 程序 ,需要 使 用 不 同类 型 的 数据 来 测 
试 。WinRunner 的 数据 驱动 向 导 (Data Driver Wizard) 可 以 让 你 简单 地 点 击 几 下 鼠标 ,就 
可 以 把 一 个 业务 流程 测试 转化 为 数据 驱动 测试 ,从 而 反映 多 个 用 户 各 自 独特 且 真 实 的 
行为 。 

(5) 运行 测试 。 创 建 好 测试 脚本 ,并 插入 检查 点 和 必要 的 添加 功能 后 ,就 可 以 开始 运 
行 测 试 。 运 行 测试 时 ,WinRunner 会 自动 操作 应 用 程序 ,就 像 一 个 真实 的 用 户 根 据 业 务 
流程 执行 着 每 一 步 的 操作 。 测 试 运行 过 程 中 ,如 有 网 络 消 息 窗口 出 现 或 其 他 意外 事件 出 
现 ,WinRunner 也 会 根据 预先 的 设 定 排除 这 些 干扰 。 

(6) 分 析 结 果 。 测 试 运行 结束 后 ,WinRunner 通过 交互 式 的 报告 工具 来 提供 详尽 的 、 
易 读 的 报告 。 报 告 中 会 列 出 测试 中 发 现 的 错误 内 容 、 位 置 .检查 点 和 其 他 重要 事件 ,帮助 
测试 人 员 对 测试 结果 进行 分 析 。 这 些 测试 结果 还 可 以 通过 Mercury Interactive 的 测试 管 
理工 具 TestDirector 来 查阅 。 

(7) 维护 测试 。 随 着 时 间 的 推移 ,开发 人 员 会 对 应 用 程序 做 进一步 的 修改 ,并 需要 增 
加 另外 的 测试 。 使 用 WinRunner, 不 必 对 程序 的 每 一 次 改动 都 重新 创建 测试 。 
WinRunner 可 以 创建 在 整个 应 用 程序 生命 周期 内 都 可 以 重复 使 用 的 测试 ,从 而 大 大 地 节 
省 时 间 和 资源 。 

3. LoadRunner 

Mercury Interactive 的 LoadRunner 是 一 种 适用 于 企业 级 系统 、 各 种 体系 架构 的 自动 
负载 测试 工具 ,通过 模拟 实际 用 户 的 操作 行为 和 实行 实时 性 能 监测 ,帮助 更 快 地 查找 和 发 
现 问 题 ,预测 系统 行为 并 优化 系统 性 能 。 通 过 使 用 LoadRunner, 企 业 能 最 大 限度 地 缩短 
测试 时 间 ,优化 性 能 和 加 速 应 用 系统 的 发 布 周期 。 此 外 ,LoadRunner 能 支持 广泛 的 协议 
和 技术 ,为 一 些 特殊 环境 提供 特殊 的 解决 方案 。 业 界 认 为 LoadRunner 的 功能 与 
QALoad 相 比 不 相 上 下 。 

LoadRunner 的 主要 功能 如 下 。 

(1) 轻松 创建 虚拟 用 户 。LoadRunner 可 以 记录 下 客户 端的 操作 ,并 以 脚本 的 方式 保 
存 , 然 后 建立 多 个 虚拟 用 户 ,在 一 台 或 几 台 主机 上 模拟 上 百 或 上 千 虚 拟 用 户 同 时 操作 的 情 
景 , 同 时 记录 下 各 种 数据 ,并 根据 测试 结果 分 析 系 统 瓶 颈 , 输 出 各 种 定制 压力 测试 报告 。 

(2) 使 用 Virtual User Generator, 能 简便 地 创立 起 系统 负载 。 该 引擎 能 生成 虚拟 用 
户 , 以 虚拟 用 户 的 方式 模拟 真实 用 户 的 业务 操作 行为 。 利 用 虚拟 用 户 ,在 不 同 的 操作 系统 
的 机 器 上 同时 运行 上 万 个 测试 ,从 而 反映 出 系统 真正 的 负载 能 力 。 

(3) 创建 真实 的 负载 。LoadRunner 能 建立 持续 且 循 环 的 负载 ,限定 负载 又 能 管理 和 
驱动 负载 测试 方案 ,而 且 可 以 利用 日 程 计 划 服 务 来 定义 用 户 在 什么 时 候 访 问 系统 以 产生 
负载 ,使 测试 过 程 高 度 自动 化 。 
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(4) 定位 性 能 问题 。LoadRunner 内 含 集成 的 实时 监测 器 ,在 负载 测试 过 程 的 任何 时 
候 , 可 以 观察 到 应 用 系统 的 运行 性 能 ,实时 显示 交易 性 能 数据 和 其 他 系统 组 件 的 实时 
性 能 。 

(5) 分 析 结 果 以 精确 定位 问题 所 在 。 测 试 完毕 ,LoadRunner 收集 .汇总 所 有 的 测试 
数据 ,提供 高 级 的 分 析 和 报告 工具 ,以 便 迅 速 查找 到 问题 并 追溯 原由 。 

(6) 此 外 ,LoadRunner 完全 支持 基于 Java 平台 应 用 服务 器 Enterprise Java Beans 的 
负载 测试 ,支持 无 限 应 用 协议 WAP 和 I-mode, 支 持 Media Stream 应 用 ,可 以 记录 和 重 放 
任何 流行 的 多 媒体 数据 流 格式 来 诊断 系统 的 性 能 问题 ,查找 原由 、 分 析 数 据 的 质量 。 


4. Parasoft C++ Test 

Parasoft C++ Test 是 Parasoft 公司 开发 的 专门 针对 C/C++ 的 源 程 序 代 码 进行 自动 
化 单元 测试 的 工具 ,可 以 自动 测试 任何 C/C++ 函数 、 类 ,自动 生成 测试 用 例 、 测 试 驱动 函 
数 或 桩 函数 ,在 自动 化 的 环境 下 完成 单元 测试 ,其 单元 级 的 测试 覆盖 率 可 以 达到 100% 。 
Parasoft C++ Test 能 够 自动 测试 代码 构造 ( 白 盒 测 试 ) .测试 代码 的 功能 性 ( 黑 盒 测试 ) 和 
维护 代码 的 完整 性 (回归 测试 ) 。 

(1) 白 盒 测 试 。Parasoft C++ Test 的 白 盒 测试 针对 C/C++ 被 测 源 程序 进行 分 析 ， 
对 所 有 类 的 成 员 函 数 及 公共 成 员 函 数 以 及 私有 函数 进行 测试 。 在 进行 测试 时 ,对 指定 的 
文件 ,类 或 者 函数 自动 生成 测试 用 例 。 当 输入 非法 参数 时 ,判断 有 关 的 函数 是 否 能 够 
处 理 。 

(2) 黑 盒 测 试 。Parasoft C++ Test 的 黑 盒 测试 不 对 被 测 程序 进行 分 析 , 只 是 对 类 的 
公共 接口 函数 进行 测试 。 黑 盒 测 试 时 ,Parasoft C++ Test 不 自动 生成 测试 用 例 , 而 是 直 
接 运 行 在 “测试 用 例 编 辑 器 ”中 当前 已 有 的 测试 用 例 ,这 时 需要 测试 人 员 进 行 手工 添加 。 

(3) 回归 测试 。 回 归 测 试 是 在 修改 了 被 测试 的 程序 之 后 ,用 原 有 的 测试 用 例 进 行 重 
新 测试 的 活动 。Parasoft C++ Test 的 回归 测试 使 用 较为 简单 , 既 可 针对 VC 工程 进行 全 
面 的 测试 ,也 可 只 对 一 个 C/C++ 的 原文 件 进行 测试 。 在 软件 项 目 规模 较 大 的 时 候 ,通常 
按照 一 个 个 文件 分 别 进行 测试 ,而 不 是 直接 针对 一 个 工程 进行 。 


5. QACenter 

QACenter 是 黑 盒 测 试 工具 , 它 可 以 帮助 测试 人 员 创建 一 个 快速 .可 重用 的 测试 过 
程 。 该 测试 工具 能 够 自动 帮助 管理 测试 过 程 ,快速 分 析 和 调试 程序 ,能 够 针对 回归 测试 、 
强度 测试 单元 测试 、 并 发 测试 集成 测试 .移植 测试 容量 和 负载 测试 建立 测试 用 例 , 自 动 
执行 测试 并 产生 相应 的 测试 文档 。 

QACenter 测试 工具 主要 包括 以 下 几 个 模块 : 

(1) QARun。QARun 主要 用 于 客户 端 /服务 器 系统 中 对 客户 端的 功能 测试 。 在 功 
能 测试 中 ,主要 包括 对 系统 的 GUI 进行 测试 以 及 对 客户 端 事务 逻辑 进行 测试 。QARun 
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的 测试 实现 方法 是 通过 鼠标 移动 .键盘 点 击 活动 操作 被 测 系 统 ,得 到 相应 的 脚本 ,并 对 脚 
本 进行 编辑 和 调试 。 在 记录 过 程 中 针对 被 测 系统 中 所 包含 的 功能 点 进行 基线 的 建立 ,也 
就 是 说 在 插入 检查 点 的 同时 建立 期 望 输出 值 。 一 般 情况 下 ,检查 点 在 QARun 提示 目标 
系统 执行 一 系列 事件 之 后 被 执行 ,检查 点 可 以 确定 实际 结果 与 期 望 结果 是 否 相同 。 

(2) QALoad。QALoad 是 强 负载 下 应 用 的 性 能 测试 工具 。 它 主要 检测 系统 负载 能 
力 ,支持 范围 广 , 测 试 内 容 多 。 该 工具 能 够 帮助 测试 人 员 、 开 发 人 员 和 系统 管理 人 员 对 于 
分 布 式 系统 的 被 测 程序 进行 有 效 的 负载 测试 。 负 和 载 测 试 能 够 模拟 大 量 的 用 户 并 发 活动 ， 
从 而 发 现 大 用 户 负载 下 对 C/S 系统 的 影响 。 

(3) Eco Tools。Eco Tools 是 可 用 性 管理 工具 ,在 性 能 测试 后 完成 系统 的 可 用 性 分 
析 。 有 很 多 因素 影响 系统 的 可 用 性 ,用 户 桌 面 、 网 络 、 服 务 器 数据 库 环境 以 及 各 种 子 组 件 
都 能 链接 在 一 起 ,任何 一 个 组 件 都 可 能 造成 整个 系统 对 最 终 用 户 的 不 可 使 用 问题 。Eco 
Tools 工具 包括 的 各 种 Agents 可 以 监控 服务 器 资源 ,特别 是 Windows NT、UNIX 系统 、 
Oracle、Sybase、SQL Server 系统 和 其 他 的 应 用 软件 系统 。 

(4) Eco Scope。Eco Scope 是 性 能 优化 工具 。 它 能 解决 在 大 型 企业 复杂 环境 下 分 析 
与 测量 应 用 系统 性 能 的 难题 。 通 过 提供 应 用 的 性 能 级 别 及 其 支撑 架构 的 信息 ,帮助 部 门 
就 如 何 提高 应 用 系统 的 性 能 提出 多 方面 的 决策 方案 。Eco Scope 应 用 综合 软件 探测 技术 
无 干扰 地 监控 网 络 ,能 够 自动 跟踪 LAN/WAN 上 的 应 用 流量 ,采集 详细 的 性 能 指标 ,并 
将 这 些 信息 关联 到 交互 界面 中 ,自动 识别 低 性 能 的 应 用 系统 、 受 影响 的 服务 器 与 用 户 性 能 
低下 的 程度 。 用 户 界 面 也 能 以 一 种 智能 的 方式 访问 大 量 的 Eco Scope 数据 。 所 以 能 较 快 
地 找到 性 能 问题 的 根源 。 

(5) QADirector。QADirector 是 测试 的 组 织 设计 和 创建 以 及 管理 工具 。 它 提供 应 
用 系统 管理 框架 ,使 开发 者 和 QA 工作 组 将 所 有 测试 阶段 组 合 在 一 起 ,从 而 最 有 效 地 使 用 
现 有 测试 资料 ,测试 方法 和 应 用 测试 工具 。QADirector 使 用 户 能 够 自动 地 组 织 测试 资 
料 ,建立 测试 过 程 ,以 便 对 多 种 情况 和 条 件 进行 测试 。 按 正确 的 次 序 执行 多 个 测试 脚本 ， 
记录 跟踪、 分 析 和 记录 测试 结果 ,并 与 多 个 并 发 用 户 共 享 测试 信息 。 


6. WebLoad 

WebLoad 是 RadView 公司 推出 的 一 个 性 能 测试 和 分 析 工 具 , 它 让 Web 应 用 程序 开 
发 者 自动 执行 压力 测试 ; WebLoad 通过 模拟 真实 用 户 的 操作 ,生成 压力 负载 来 测试 Web 
Application 的 性 能 。 

用 户 使 用 WebLoad 创建 的 是 基于 JavaScript 的 测试 脚本 , 称 为 议程 Agenda, 用 来 模 
拟 客 户 的 行为 ,通过 执行 该 脚本 来 衡量 Web 应 用 程序 在 真实 环境 下 的 性 能 。 如 有 需要 可 
以 在 做 负载 测试 的 同时 ,使 用 服务 器 监控 工具 对 服务 器 端的 内 容 进 行 记录 ,那样 使 负载 测 
试 更 加 全 面 。 

WebLoad 的 性 能 测试 流程 : 


了 


软件 测试 教程 


(1) 计划 一 个 负载 (压力 ) 会 话 Load Session, 用 WebLoad Console 创建 Load 
Templates, 将 一 系列 压力 事件 定义 到 一 个 压力 会 话 Load Session 里 。 

(2) 创建 测试 议程 Agenda。 用 WebLoad Visual AAT 创建 测试 议程 Agenda。 

(3) 创建 压力 模板 Load Templates。 可 用 WebLoad Wizard 创建 压力 模板 ,可 以 创 
建 一 个 预期 性 能 参数 的 压力 测试 模板 或 手工 创建 压力 模板 。 

(4) 输出 测试 报告 并 分 析 测 试 结果 : 实时 查看 测试 结果 ; 创建 集成 报告 ; 
WebLoad Reporter 分 析 测 试 结果 。 

7. Web Application Stress (WAS) Tool 

微软 的 WAS 允许 以 不 同 的 方式 创建 测试 脚本 : 可 以 通过 使 用 浏览 器 走 一 遍 站 点 来 
录制 脚本 ,也 可 以 从 服务 器 的 日 志文 件 导 入 URL, 或 者 从 一 个 网 络 内 容 文 件 夹 选 择 一 个 
文件 。 当 然 ,也 可 以 手工 地 输入 URL 来 创建 一 个 新 的 测试 脚本 。 

WAS 可 以 使 用 任何 数量 的 客户 端 运行 测试 脚本 ,全 部 由 一 个 中 央 主 客户 端 来 控制 。 
在 每 一 个 测试 开始 前 ,主客 户 机 透明 地 执行 以 下 任务 : 

(1) 与 其 他 所 有 的 客户 机 通信 。 

(2) 把 测试 数据 分 发 给 所 有 的 客户 端 。 

(3) 在 所 有 客户 端 同时 初始 化 测试 。 

(4) 从 所 有 的 客户 端 收集 测试 结果 和 报告 。 

这 个 特性 非常 重要 ,尤其 对 于 要 测试 一 个 需要 使 用 很 多 客户 端的 服务 器 群 的 最 大 吞 
吐 量 时 非常 有 用 。 除 此 之 外 ,WAS 是 被 设计 用 于 模拟 Web 浏览 器 发 送 请 求 到 任何 采用 
了 HTTP 1.0 或 1.1 标 准 的 服务 器 ,而 不 考虑 服务 器 运行 的 平台 。 除 了 它 的 易 用 性 外 ， 
WAS 还 有 很 多 其 他 有 用 的 特性 ,包括 : 

(1) 对 于 需要 署名 登录 的 网 站 , 它 允 许 创 建 用 户 账号 。 

(2) 允许 为 每 个 用 户 存储 Cookies 和 Active Server Pages (ASP) 的 会 话 信息 。 

(3) 支持 随机 的 或 顺序 的 数据 集 ,以 用 在 特定 的 名 称 - 值 对 。 

(4) 支持 带宽 调节 和 随机 延迟 ,以 更 真实 地 模拟 显示 情形 。 

(5) 支持 SSL (Secure Sockets Layer) 协议 。 

(6) 允许 URL 分 组 和 对 每 组 的 点 击 率 的 说 明 。 

(7) 提供 一 个 对 象 模型 ,可 以 通过 Microsoft Visual Basic Scripting Edition (VBScript) 
处 理 或 者 通过 定制 编程 来 达到 启动 、 结 束 和 配置 测试 脚本 的 效果 。 


8. TestDirector 

TestDirector 是 一 套 测试 管理 软件 。 可 以 使 用 它 来 规范 科学 的 测试 管理 流程 ,建立 
起 针对 项 目的 测试 方案 和 计划 ,消除 组 织 机 构 间 、 地 域 间 的 障碍 ,让 测试 人 员 、 开 发 人 员 或 
其 他 的 IT 人 员 通 过 一 个 中 央 数 据 仓 库 ,在 不 同 地 方 就 能 交互 测试 信息 。TestDirector 将 
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测试 过 程 流水 化 一 一 从 测试 需求 管理 ,到 测试 计划 ,测试 日 程 安排 ,测试 执行 再 到 出 错 后 
的 错误 跟踪 一 一 仅 在 一 个 基于 浏览 器 的 应 用 中 便 可 完成 ,而 不 需要 每 个 客户 端 都 安装 一 
套 客户 端 程序 。 

(1) 需求 管理 。 程 序 的 需求 驱动 整个 测试 过 程 。TestDirector 的 Web 界面 简化 了 这 
些 需 求 管理 过 程 ,以 此 可 以 验证 应 用 软件 的 每 一 个 特性 或 功能 是 否 正常 。 通 过 提供 一 个 
比较 直观 的 机 制 将 需求 和 测试 用 例 、 测 试 结果 和 报告 的 错误 联系 起 来 ,从 而 确保 能 达到 最 
高 的 测试 覆盖 率 。 

(2) 测试 计划 的 制定 。 其 Test Plan Manager 指导 测试 人 员 如 何 将 应 用 需求 转换 为 
具体 的 测试 计划 ,组 织 起 明确 的 任务 和 责任 ,并 在 测试 计划 期 间 为 测试 小 组 提供 关键 要 点 
和 Web 界面 来 协调 团队 间 的 沟通 。 

(3) 手工 测试 与 自动 测试 的 结合 。 多 数 的 测试 项 目 需要 手工 测试 与 自动 测试 相 结 
合 , 启 用 一 个 自动 化 切换 机 制 , 能 让 测试 人 员 决 定 哪些 重复 的 手工 测试 可 转变 为 自动 脚本 
以 提高 测试 速度 。TestDirector 还 能 简化 将 手工 测试 切换 到 自动 测试 脚本 的 转换 ,并 可 
立即 启动 测试 设计 过 程 。 

(4) 安排 和 执行 测试 。 一 旦 测试 计划 建立 后 ,TestDirector 的 测试 实验 室 管理 为 测试 
日 程 制订 提供 一 个 基于 Web 的 框架 。 其 Smart Scheduler 能 根据 测试 计划 中 创立 的 指标 
对 运行 着 的 测试 执行 监控 ,能 自动 分 辩 是 系统 还 是 应 用 错误 ,然后 将 测试 切换 到 网 络 的 其 
他 机 器 。 使 用 Graphic Designer 图 表 设 计 , 可 以 很 快 地 将 测试 分 类 以 满足 不 同 的 测试 目 
的 ,如 功能 性 测试 .负载 测试 ,完整 性 测试 等 。 

(5) 缺陷 管理 。TestDirector 的 出 错 管理 直接 贯穿 作用 于 测试 的 全 过 程 ,从 最 初 发 现 
问题 ,到 修改 错误 ,再 到 验证 修改 结果 。 利 用 出 错 管理 ,测试 人 员 只 需 进 入 一 个 URL ,就 
可 汇报 和 更 新 错误 ,过 滤 整 理 错误 列表 并 作 趋 势 分 析 。 

(6) 图 形 化 和 报表 输出 。TestDirector 常规 化 的 图 表 和 报告 帮助 对 数据 信息 进行 分 
析 ,还 以 标准 的 HTML 或 Word 形式 提供 生成 和 发 送 正式 测试 报告 。 测 试 分 析 数 据 还 可 
简便 地 输入 到 标准 化 的 报告 工具 ,如 Excel、ReportSmith、CrystalReports 和 其 他 类 型 的 
第 三 方 工具 。 


6.4 性 能 测试 实例 


为 了 使 读者 更 深入 地 了 解 软 件 测试 自动 化 以 及 自动 化 测试 工具 的 使 用 ,本 节 列 举 了 
一 个 使 用 LoadRunner 进行 的 性 能 测试 实例 ,希望 对 初次 接触 自动 化 测试 的 读者 能 够 有 
所 帮助 。 

该 实例 是 针对 某 培训 中 心 试题 库 的 性 能 测试 。 该 试题 库 是 用 来 对 参加 培训 的 人 员 培 
训 结 果 的 一 个 考核 。 试 题库 在 培训 中 心 内 部 Web 服务 器 上 ,假设 开设 50 个 账号 和 密码 


有 


软件 测试 教程 


可 供 50 个 考生 同时 参加 考试 。 要求 ,每 台 机 器 只 能 由 一 个 用 户 使 用 ,每 个 用 户 只 能 使 用 
各 自 不 同 的 账号 登录 考试 系统 ,做 完 题 目 后 ,要求 提交 考试 结果 ,车 在 制定 的 时 间 内 不 提 
交 , 则 系统 强制 提交 考试 结果 。 

但 是 ,一 般 测试 部 门 不 可 能 有 50 台 机 器 同时 进行 测试 。 所 以 ,可 以 借 Loadrunner 模 
拟 IP 地 址 ,修改 脚本 来 协助 测试 。 但 是 ,为 了 保证 测试 结果 ,建议 使 用 所 有 可 用 的 机 器 进 
行 复 测 ,因为 有 时 候 是 不 可 以 完全 信赖 工具 的 。 
6.4.1 现场 测试 环境 

硬件 : 50 台 PC 机 ,Web 服务 器 。 

软件 : Loadrunner 8.0,Windows 2000,IE 5.0 和 IE 6.0。 

人 员 : 质 控 小 组 2 人 ,执行 现场 测试 。 

项 目 小 组 22 人 ,提供 现场 环境 。 

技术 小 组 1 人 ,提供 技术 支持 。 
6.4.2 测试 要 求 

50 个 用 户 拥有 独立 IP 地 址 ,不 同 的 用 户 及 密码 登录 ,试题 完成 后 各 自 同时 提交 。 
6.4.3 测试 内 容 

50 个 用 户 以 不 同 的 用 户 名 和 密码 登录 试题 库 。 试 题 完成 后 ,提交 考试 结果 。 测 试 考 
试 结果 是 否 能 正常 提交 以 及 正确 评分 。 
6.4.4 测试 方案 


1. 完成 20 台 实 际 的 PC 机 进行 现场 测试 

(1) 准备 工作 ,并 做 计划 。 第 一 轮 测试 执行 三 遍 , 设 定 用 户 考 试 内 容 全 部 同时 提交 ， 
第 一 遍 全 部 使 用 IE 5.0, 第 二 遍 10 台 使 用 IE 5.0,10 台 使 用 IE 6.0, 第 三 遍 全 部 使 用 
IE 6.0。 

(2) At 9: 00,20 个 用 户 同时 登录 系统 。 

(3) At 9: 05,20 个 用 户 同时 全 部 提交 。 

(4) 分 别 记录 第 一 轮 测试 (三 遍 ) 的 结果 。 

(5) 第 二 轮 测试 准备 工作 , 设 定 15 个 用 户 考 试 内 容 同时 提交 ,另外 5 个 用 户 延 时 
5 分 钟 提交 ,全 部 使 用 IE 5.0。 

(6) At 9: 15,20 个 用 户 同 时 登录 系统 。 

(7) At 9: 20,15 个 用 户 同 时 提交 。 

(8) At 9: 25 ,剩余 5 个 用 户 同时 提交 。 

(9) 记录 第 二 轮 测试 结果 。 

(10) 第 三 轮 测试 准备 工作 , 设 定 15 个 用 户 考试 内 容 同 时 提交 ,另外 5 个 用 户 延 时 
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5 分 钟 提交 ,全 部 使 用 IE 6. 0。 

(11) At 9: 15,20 个 用 户 同时 登录 系统 。 

(12) At 9: 20,15 个 用 户 同时 提交 。 

(13) At 9: 25 ,剩余 5 个 用 户 同 时 提交 。 

(14) 记录 第 三 轮 测试 结果 。 

(15) 第 四 轮 测试 准备 工作 , 设 定 15 个 用 户 考 试 内 容 同 时 提交 ,另外 5 个 用 户 延 时 
5 分 钟 提交 ,正常 提交 用 户 使 用 IE 5.0, 延 时 提交 用 户 使 用 IE 6. 0。 

(16) At 9: 15,20 个 用 户 同时 登录 系统 。 

(17) At 9: 20,15 个 用 户 同时 提交 。 

(18) At 9: 25 ,剩余 5 个 用 户 同时 提交 。 

(19) 记录 第 四 轮 测试 结果 。 

(20) 第 五 轮 测试 准备 工作 , 设 定 15 个 用 户 考 试 内 容 同 时 提交 ,另外 5 个 用 户 延 时 
5 分 钟 提交 ,正常 提交 用 户 使 用 IE 6.0, 延 时 提交 用 户 使 用 IE 5. 0。 

(21) At 9: 15,20 个 用 户 同 时 登录 系统 。 

(22) At 9: 20,15 个 用 户 同 时 提交 。 

(23) At 9: 25 ,剩余 5 个 用 户 同时 提交 。 

(24) 记录 第 五 轮 测试 结果 。 

(25) 第 六 轮 测试 准备 工作 , 设 定 15 个 用 户 考试 内 容 同 时 提交 ,另外 5 个 用 户 延 时 
5 分 钟 提交 ,正常 提交 用 户 其 中 10 个 使 用 IE 5.0,5 个 使 用 IE 6.0, 延 时 提交 用 户 使 用 
IE 5;,0。 

(26) At 9: 15,20 个 用 户 同时 登录 系统 。 

(27) At 9: 20,15 个 用 户 同 时 提交 。 

(28) At 9: 25 ,剩余 5 个 用 户 同时 提交 。 

(29) 记录 第 六 轮 测试 结果 。 

(30) 第 七 轮 测试 准备 工作 , 设 定 10 个 用 户 考试 内 容 同 时 提交 ,另外 10 个 用 户 分 两 
次 分 别 延 时 5 分 钟 .15 提交 。 

(31) At 9: 35,20 个 用 户 同 时 登录 系统 。 

(32) At 9: 40,10 个 用 户 同时 提交 。 

(33) At 9: 45 ,剩余 的 其 中 5 个 用 户 同 时 提交 。 

(34) At 9: 55 ,剩余 的 5 个 用 户 同 时 提交 。 

(35) 记录 第 七 轮 测试 结果 ,参见 第 二 轮 测 试 一 第 六 轮 测试 过 程 分 别 对 IE 5. 0 和 
IE 6.0 的 情况 进行 测试 。 

(36) 第 八 轮 测试 准备 工作 , 设 定 其 中 10 个 用 户 不 提交 ,由 系统 强行 提交 。 

(37) At 10: 10,20 个 用 户 同时 登录 系统 。 
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(38) At 10: 15,10 个 用 户 同 时 提交 。 
(39) 其 余 用 户 的 内 容 由 系统 强行 提交 。 
(40) 记录 第 八 轮 测试 结果 ,参见 第 二 轮 测 试 一 第 六 轮 测试 过 程 分 别 对 IE 5.0 和 
IE 6.0 的 情况 进行 测试 。 
(41) 第 九 轮 测试 准备 工作 , 设 定 其 中 10 个 用 户 同 时 提交 ,5 个 用 户 延 时 5 分 钟 提交 ， 
其 余 用 户 由 系统 强行 提交 。 
(42) At 10: 25,20 个 用 户 同时 登录 系统 。 
(43) At 10: 30,10 个 用 户 同 时 提交 。 
(44) At 10: 35, 剩 余 的 其 中 5 个 用 户 同时 提交 。 
(45) 剩余 5 个 用 户 系 统 强制 提交 。 
(46) 记录 第 九 轮 测试 结果 ,参见 第 二 轮 测试 一 第 六 轮 测 试 过 程 分 别 对 IE 5.0 和 
IE 6.0 的 情况 进行 测试 。 
2. 模拟 20 个 用 户 ( 含 10 台 PC 机 ) 进 行 测试 
其 中 ,10 台 是 PC 机 ,另外 10 台 机 器 的 IP 地址 是 LoadRunner 模拟 出 来 的 。 
(1) 在 10 台 实 际 的 PC 机 中 抽取 其 中 一 台 虚 拟 10 个 IP 地 址 ,包括 自身 的 IP 地址 ， 
该 机 器 上 共 11 个 IP 地 址 ,这 11 个 IP 地 址 只 能 全 部 使 用 IE 5.0 或 者 全 部 使 用 IE 6.0。 
(2) 其 余 9 台 实 际 的 PC 机 分 别 由 9 个 人 操作 ,另外 一 台 机 器 由 一 位 质 控 部 人 员 
操作 。 
(3) 对 于 异常 情况 , 延 时 提交 和 强制 提交 全 部 由 实际 的 机 器 来 模拟 。 
(4) 其 余 过 程 参 见 测试 方案 1。 


3. 模拟 20 个 用 户 ( 含 5 台 PC 机 ) 进 行 测试 

其 中 ,5 台 是 PC 机 ,另外 15 台 机 器 的 IP 地址 是 用 LoadRunner 模拟 出 来 的 。 

(1) 在 5 台 实 际 的 PC 机 中 抽取 其 中 一 台 虚 拟 15 个 IP 地 址 ,包括 自身 的 IP 地 址 ,该 
机 器 上 共 16 个 IP 地址 ,这 16 个 IP 地址 只 能 全 部 使 用 IE 5.0 或 者 全 部 使 用 IE 6.0。 

(2) 其 余 4 台 实 际 的 PC 机 分 别 由 4 个 人 操作 ,另外 一 台 机 器 由 一 位 质 控 部 人 员 操 作 。 

(3) 对 于 异常 情况 , 延 时 提交 和 强制 提交 全 部 由 实际 的 机 器 来 模拟 。 

(4) 其 余 过 程 参见 测试 方案 1。 


4. 模拟 35 个 用 户 进行 测试 

其 中 ,20 台 是 PC 机 ,另外 15 台 机 器 的 IP 地 址 是 用 LoadRunner 模拟 出 来 的 。 

(1) 在 20 台 实 际 的 PC 机 中 抽取 其 中 两 台 分 别 虚拟 7 个 ,8 个 IP 地 址 ,这 17 个 IP 地 
址 只 能 全 部 使 用 IE 5. 0 或 者 全 部 使 用 IE 6.0。 

(2) 其 余 18 台 实 际 的 PC 机 分 别 由 18 个 人 操作 ,另外 两 台 机 器 由 两 位 质 控 部 人 员 
操作 。 
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(3) 对 于 异常 情况 , 延 时 提交 和 强制 提交 全 部 由 实际 的 机 器 来 模拟 。 
(4) 其 余 过 程 参 见 测试 方案 1 。 


5. 模拟 50 台 用 户 进行 测试 

其 中 ,20 台 是 PC 机 ,另外 30 台 机 器 的 IP 地 址 是 用 分 别 用 两 台 实际 的 PC 机 模拟 出 
来 的 。 记 录 测 试 结果 。 

(1) 在 20 台 实 际 的 PC 机 中 抽取 其 中 两 台 分 别 虚拟 15 个 IP 地 址 ,这 32 个 IP 地 址 
只 能 全 部 使 用 IE 5. 0 或 者 全 部 使 用 IE 6.0。 

(2) 其 余 18 台 实际 的 PC 机 分 别 由 18 个 人 操作 ,另外 两 台 机 器 由 两 位 质 控 部 人 员 
操作 。 

(3) 对 于 异常 情况 , 延 时 提交 和 强制 提交 全 部 由 实际 的 机 器 来 模拟 。 

(4) 其 余 过 程 参 见 测试 方案 1 。 


6. 重复 测试 方案 5 

对 测试 方案 5 中 所 述 情况 重复 测试 两 次 。 

7. 50 台 PC 机 现场 测试 

为 了 保证 结果 的 正确 性 ,完成 50 台 实 际 的 PC 机 进行 现场 测试 。 过 程 参见 测试 方 
案 1。 
6.4.5 测试 过 程 

注意 ; 该 测试 过 程 针对 虚拟 IP 地 址 情况 。 

(1) 一 台 PC 机 上 创建 15 个 虚拟 的 IP 地 址 。 

首先 ,启动 IP Wizard ,过程 如 下 : 开始 程序 LoadRunner->Tools->IP Wizard。 

单 击 Add 按钮 ,添加 你 计划 虚拟 的 IP 地 址 。 但 是 注意 不 能 添加 已 经 被 占用 的 IP 
地 址 。 

(2) 启动 Virtual User Generator, 并 录制 脚本 ,由 于 50 个 用 户 的 账号 和 密码 各 不 相 
同 , 所 以 ,要 修改 脚本 ,设置 参数 。 

(3) 启动 LoadRunner Controller, 先 将 刚才 保存 的 脚本 添加 进来 。 然 后 单 击 Scenario 菜 
单 ,激活 其 中 的 Enable IP Spoofer。 

(4) 单 击 屏幕 右 方 的 Generators ,添加 已 经 建立 的 IP, 然 后 建立 连接 。 

(5) 对 连接 起 来 的 不 同 用 户 (IP 地 址 分配 不 同 的 脚本 ,在 Controller 中 的 design 中 ， 
单 击 Load Generators 其 中 ,每 个 脚本 有 一 个 用 户 执行 。 

(6) 执行 Scenario。 

LoadRunner 内 含 集成 的 实时 监测 器 ,在 负载 测试 过 程 中 的 任何 时 候 , 都 可 以 观察 到 
应 用 系统 的 运行 性 能 。 这 些 被 动 监测 器 将 实时 显示 交易 性 能 数据 ,如 反应 时 间 , 和 其 他 系 
统 组 件 包括 应 用 服务 器 、Web 服务 器 、 网 络 设备 和 数据 库 等 的 即时 性 能 。 这 样 ,使 用 者 就 
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可 以 在 测试 过 程 中 从 客户 和 服务 器 的 双方 面 评估 这 些 系统 组 件 的 运行 性 能 ,从 而 更 快 地 
发 现 问题 。 再 者 ,利用 LoadRunner 的 contentCheckTM, 可 以 判断 负载 下 的 应 用 程序 功 
能 正常 与 否 。ContentCheck 在 virtual users 运行 时 ,检测 应 用 程序 的 网 络 内 容 , 从 中 确 
定 是 否 有 错误 内 容 传 送出 去 。 实 时 浏览 器 提供 从 终端 用 户 角度 观察 到 的 程序 性 能 情况 。 

当 测 试 运行 结束 后 ,LoadRunner 收集 汇总 所 有 的 测试 数据 ,提供 高 级 分 析 和 汇报 数 
据 , 这 样 便 能 迅速 查找 到 性 能 问题 并 追溯 原因 。 


小 结 


软件 测试 在 整个 软件 开发 过 程 中 占据 了 将 近 一 半 的 时 间 和 资源 。 通 过 在 测试 过 程 中 
合理 地 引入 软件 测试 工具 ,能 够 缩短 软件 开发 时 间 ,提高 测试 质量 ,从 而 更 快 .更 好 地 为 用 
户 提供 需要 的 软件 产品 。 软 件 测试 自动 化 具有 良好 的 可 操作 性 、 可 重复 性 和 高 效率 等 特 
点 ,是 软件 测试 中 提高 测试 效率 、 覆 盖 率 和 可 靠 性 等 的 重要 测试 手段 。 软 件 测试 工具 能 在 
测试 过 程 中 发 挥 多 大 的 作用 ,取决 于 测试 过 程 的 管理 水 平和 人 员 的 技术 水 平 。 测 试 过 程 
的 管理 水 平和 人 员 的 技术 水 平 都 是 人 的 因素 ,是 一 个 开发 组 织 不 断 改进 ,长 期 积累 的 
结果 。 

测试 工具 根据 测试 方法 的 不 同 , 可 以 分 为 白 盒 测试 工具 、 黑 盒 测 试 工具 和 测试 管理 工 
具 等 。 选 择 测 试 工具 不 仅 要 遵守 一 定 的 程序 和 步骤 ,而 且 要 注重 测试 工具 的 特性 ,结合 
己 的 实际 应 用 特点 ,做 出 决定 。 

测试 自动 化 实现 到 何 种 程度 为 好 ? 

(1) 测试 自动 化 的 程度 再 高 都 不 可 能 取代 手工 测试 , 即 测试 工具 不 可 能 取代 测试 
人 员 ; 

(2) 一 般 来 讲 , 测 试 自动 化 在 整个 测试 过 程 中 只 能 占 到 30% 左 右 ; 

(3) 实现 、 运 用 自动 化 的 程度 还 取决 于 各 方面 的 资源 ,特别 是 软件 的 行业 规范 性 和 软 
件 开发 的 稳定 性 ; 

(4) 对 于 部 分 白 盒 测试 可 以 使 用 测试 工具 ,如 对 代码 性 能 分 析 等 。 

对 于 某 一 个 实际 产品 ,如 何 实现 测试 自动 化 的 计划 ? 

(1) 将 测试 的 基本 管理 形成 自动 化 ,如 bug 管理 等 ; 

(2) 利用 测试 自动 化 工具 来 实现 一 些 手 工 无 法 进行 的 测试 活动 ,如 : 压力 测试 .并 发 
测试 .强度 测试 等 ; 

(3) 利用 测试 自动 化 工具 来 完成 回归 测试 中 的 缺陷 跟踪 测试 ; 

(4) 利用 测试 自动 化 工具 来 记录 两 个 版 本 的 异同 ,以 找 出 缺陷 ; 

(5) 将 整个 回归 测试 都 用 自动 化 脚本 保存 ,以 完成 每 次 的 回归 测试 ; 

(6) 而 对 于 白 盒 测试 则 可 以 引入 测试 工具 进行 代码 分 析 。 


第 6 章 软件 自动 化 测试 


习题 


1. 简 述 软件 测试 自动 化 的 意义 和 作用 。 

2. 简 述 自动 化 测试 和 手工 测试 有 什么 主要 区 别 。 

3. 自动 化 测试 工具 大 致 可 以 分 为 几 类 ? 举例 说 明 几 种 与 之 相对 应 的 测试 工具 。 
4. 
5 
6 


简 述 对 常用 自动 化 测试 工具 的 认识 。 


. 试 从 网 络 上 免费 下 载 自动 化 测试 工具 ,并 在 客户 机 或 服务 器 上 安装 和 运行 。 
.下载 本 章 所 介绍 的 白 盒 测试 . 黑 盒 测试 ,负载 测试 等 工具 ,学 习 其 主要 功能 及 使 用 


方法 ,尝试 进行 实例 测试 。 
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本 章 概述 

软件 测试 是 为 了 尽 可 能 多 地 发 现 软件 中 的 缺陷 并 将 其 修复 ,从 而 提高 软件 整体 质量 。 
软件 测试 工作 不 仅 要 有 计划 地 进行 ,而 且 需 要 科学 地 组 织 和 管理 ,这 样 才 能 开发 出 高 质量 
的 软件 产品 。 只 有 对 测试 活动 进行 组 织 策划 和 有 效 管理 ,才能 使 软件 测试 在 软件 质量 体 
系 保障 中 发 挥 重 要 作用 。 

本 章 从 软件 质量 保证 开始 ,介绍 了 相关 的 ISO 9000 质量 体系 标准 和 能 力 成 熟 度 模型 
(CMM) ,阐述 了 软件 测试 的 组 织 结构 和 管理 工作 。 


7.1 软件 质量 保证 与 软件 测试 


7.1.1 软件 质量 保证 

任何 软件 产品 的 开发 都 要 围绕 质量 问题 ,高 质量 是 研发 人 员 追 求 的 目标 。 质 量 是 体 
现在 开发 过 程 中 ,通过 科学 的 管理 得 到 控制 。 对 于 一 个 软件 产品 ,质量 保证 活动 是 对 整个 
软件 过 程 的 管理 ,并 且 要 贯穿 始终 。 

软件 质量 保证 就 是 通过 对 软件 产品 有 计划 地 进行 检查 和 审计 来 验证 软件 是 否 合乎 标 
准 , 找 出 改进 的 方法 ,以 达到 防止 产生 软件 缺陷 的 目的 。 许 多 软件 公司 都 设 有 质量 保证 小 
组 或 部 门 , 他 们 负责 审查 软件 设计 和 开发 人 员 的 活动 ,客观 验证 它们 是 否 符合 规定 的 标准 
和 要 求 。 

软件 质量 保证 包括 以 下 几 个 方面 的 工作 ; 

(1) 参与 制定 软件 质量 要 求 

软件 质量 保证 部 门 在 产品 开发 的 需求 分 析 阶 段 就 开始 介入 ,和 软件 开发 人 员 一 起 进 
行 软件 需求 分 析 , 对 软件 周期 各 个 阶段 制定 相关 的 计划 、 规 范 和 结束 标准 ,提出 可 能 存在 
的 问题 ,综合 软件 各 方面 特点 确定 软件 要 满足 的 质量 要 求 ,形成 正式 文档 ,作为 各 阶段 审 
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查 的 依据 。 

(2) 组 织 正 式 评 审 

利用 在 需求 分 析 阶 段 和 研发 人 员 一 起 制定 的 软件 质量 要 求 , 对 软件 工程 各 个 阶段 的 
进度 ,完成 的 质量 情况 以 及 存在 的 问题 进行 正式 评审 ,保证 每 个 阶段 都 遵守 已 制定 的 计 
划 ,规范 和 结束 标准 。 如 果 发 现 某 些 流程 没有 达到 质量 要 求 ,应 按照 逐 级 解决 的 原则 进行 
解决 ,并 将 处 理 结果 通知 相关 技术 人 员 ,把 问题 的 解决 过 程 和 结果 生成 报告 ,作为 以 后 工 
作 的 重要 参考 文档 。 

(3) 软件 测试 管理 

软件 质量 保证 工作 的 一 个 重要 内 容 就 是 对 测试 的 管理 。 软 件 测 试管 理 的 好 坏 ,直接 
影响 到 测试 的 效果 。 质 量 保证 人 员 要 从 整体 上 监督 管理 软件 测试 计划 的 实施 和 软件 测试 
策略 的 应 用 ,依据 测试 结束 标准 严格 审查 ,保证 整个 测试 工作 高 效 进行 。 

(4) 对 软件 的 变更 进行 控制 

软件 开发 过 程 中 ,修改 和 变更 是 不 可 避免 的 。 随 着 软件 问题 的 出 现 ,研发 人 员 要 进行 
一 些 有 益 的 修改 工作 ,使 软件 设计 更 理想 化 。 但 是 ,一 些 可 能 导致 新 故障 的 因素 甚至 新 的 
软件 缺陷 也 会 随 之 而 来 ,这 样 就 对 软件 质量 保证 产生 了 副作用 。 因 此 必须 严格 审查 软件 
开发 中 的 变更 请 求 ,认真 研 究 新 的 变更 可 能 给 软件 开发 带 来 的 影响 以 及 与 软件 其 他 部 分 
的 冲突 ,对 软件 的 变更 进行 控制 。 

(5) 对 软件 质量 进行 度量 

软件 质量 度量 是 指 通 过 量化 软件 产品 中 的 每 一 个 质量 因素 ,对 各 因素 进行 定量 测量 ， 
从 而 得 到 对 软件 质量 特性 的 整体 评价 。 软 件 的 质量 特性 包括 功能 性 、 可 靠 性 、 易 用 性 、 效 
率 、 可 维护 性 和 可 移植 性 ,这 些 特性 确定 了 需要 度量 软件 质量 中 的 哪些 因素 。 

软件 质量 度量 作为 一 种 函数 /功能 ,输入 的 是 软件 数据 ,输出 的 是 代表 质量 特性 的 某 
一 属性 值 。 这 样 质 量 保证 人 员 和 领导 层 就 能 掌握 各 种 指标 的 量化 信息 ,便于 严格 控制 项 
目的 进程 和 资源 的 调配 ,也 有 利于 在 软件 开发 过 程 中 做 出 准确 的 决策 。 

(6) 对 软件 质量 情况 及 时 记录 和 报告 

软件 质量 情况 的 文档 化 是 软件 质量 保证 工作 结果 的 重要 体现 。 

软件 质量 要 求 的 制定 要 作 记 录 ,软件 各 阶段 的 审查 情况 要 形成 报告 ,对 软件 测试 的 管理 
情况 也 要 文档 化 。 这 样 才 能 为 软件 过 程 的 正常 运行 和 不 断 改进 提供 有 价值 的 参考 资料 。 
7.1.2 ”软件 质量 保证 与 软件 测试 的 关系 

软件 测试 能 够 找 出 软件 缺陷 ,确保 软件 产品 满足 需求 。 但 是 测试 不 是 质量 保证 ,二 者 
并 不 等 同 。 测 试 可 以 查找 错误 并 进行 修改 ,从 而 提高 软件 产品 的 质量 。 软 件 质量 保证 则 
是 避免 错误 以 求 高 质量 ,并 且 还 有 其 他 方面 的 措施 以 保证 质量 问题 。 可 以 说 软件 质量 保 
证 与 软件 测试 之 间 既 存在 共同 点 又 有 不 同 之 处 。 

从 共同 点 的 角度 看 ,软件 测试 和 软件 质量 保证 的 目的 都 是 尽力 确保 软件 产品 满足 需 
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求 ,从 而 开发 出 高 质量 的 软件 产品 。 两 个 流程 都 贯穿 在 整个 软件 开发 生命 周期 中 。 正 规 
的 软件 测试 系统 主要 包括 : 制定 测试 计划 测试 设计 、 实 施 测试 .建立 和 更 新 测试 文档 。 
而 软件 质量 保证 的 工作 主要 为 : 制定 软件 质量 要 求 、 组 织 正式 审查 .软件 测试 管理 .对 软 
件 的 变更 进行 控制 ,对 软件 质量 进行 度量 .对 软件 质量 情况 及 时 记录 和 报告 。 

软件 质量 保证 的 职能 是 向 管理 层 提供 正确 的 可 行 信息 ,从 而 促进 和 辅助 设计 流程 的 
改进 。 软 件 质量 保证 的 职能 还 包括 监督 测试 流程 ,这 样 测试 工作 就 可 以 被 客观 地 审查 和 
评估 ,同时 也 有 助 于 测试 流程 的 改进 。 

二 者 的 不 同 之 处 在 于 软件 质量 保证 工作 侧重 对 软件 开发 流程 中 的 各 个 过 程 进行 管理 
与 控制 ,杜绝 软件 缺陷 的 产生 。 而 测试 则 是 对 已 产生 的 软件 缺陷 进行 修复 。 

软件 质量 的 一 个 不 可 忽视 的 威胁 因素 来 自 软件 的 修改 和 变更 。 所 以 软件 测试 是 软件 
质量 保证 的 关键 步 又 。 测 试 可 以 发 现 故 障 , 从 而 帮助 开发 者 发 现 问题 并 纠正 问题 。 测 试 
是 任何 质量 保证 过 程 中 必需 的 但 不 是 所 有 的 部 分 。 对 于 一 个 系统 测试 得 越 多 ,就 越 能 确 
保 这 一 系统 的 正确 性 ,然而 测试 通常 不 能 保证 整个 系统 运转 的 完全 正确 。 因 此 ,测试 在 保 
证 质量 方面 的 主要 职责 是 找 出 那些 在 设计 开始 时 就 本 应 该 避免 的 错误 并 进行 修复 。 软 件 
质量 保证 的 任务 首先 是 避免 错误 ,要 做 到 这 一 点 ,除了 测试 外 还 需要 其 他 方面 的 处 理 。 


7.2 测试 的 组 织 管理 和 测试 团队 的 职责 


随 着 软件 开发 规模 的 增 大 ,复杂 程度 的 增加 ,以 寻找 软件 中 的 错误 为 目的 的 测试 工作 
就 显得 更 加 困难 。 统 计 表 明 ,开发 较 大 规模 的 软件 ,有 40% 以 上 的 精力 是 耗费 在 测试 上 
的 ,即使 富有 经 验 的 程序 员 ,也 难免 在 编码 中 发 生 错误 ,何况 有 些 错误 在 设计 甚至 分 析 阶 
段 就 已 埋 下 祸根 ,无 论 是 早期 潜伏 下 来 的 错误 或 编码 中 新 引入 的 错误 , 若 不 及 时 排除 , 轻 
者 降低 软件 的 可 靠 性 , 重 者 导致 整个 系统 的 失败 。 为 了 尽 可 能 多 地 找 出 程序 中 的 错误 , 生 
产 出 高 质量 的 软件 产品 ,加 强 对 测试 工作 的 组 织 和 管理 就 显得 尤为 重要 。 

7.2.1 软件 测试 的 组 织 


1. 测试 的 过 程 及 组 织 

根据 软件 测试 计划 ,由 一 位 对 整个 系统 设计 熟悉 的 设计 人 员 编 写 测试 大 纲 ,明确 测试 
的 内 容 和 测试 通过 的 准则 ,设计 完整 合理 的 测试 用 例 ,以 便 系 统 实 现 后 进行 全 面 测试 。 当 
软件 由 开发 人 员 完 成 并 检验 后 ,提交 测试 组 ,由 测试 负责 人 组 织 测试 ,测试 一 般 可 以 采用 
下 列 方式 来 组 织 : 

(1) 编写 测试 大 纲 、 测 试用 例 

测试 人 员 要 仔细 阅读 有 关 资 料 , 包 括 规格 说 明 、 设 计 文 档 、 使 用 说 明 书 及 在 设计 过 程 
中 形成 的 测试 大 纲 、 测 试 内 容 及 测试 的 通过 准则 ,全 面 熟 悉 系 统 ,编写 测试 计划 ,设计 测试 
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用 例 ,做 好 测试 前 的 准备 工作 。 
(2) 将 测试 过 程 分 阶段 
软件 测试 过 程 按 各 测试 阶段 的 先后 顺序 可 分 为 单元 测试 、 集 成 测试 .确认 (有 效 性 ) 测 

试 、 系 统 测试 和 验收 (用 户 ) 测 试 5 个 阶段 。 

。 单元 测试 : 测试 执行 的 开始 阶段 。 测 试 对 象 是 每 个 单元 。 测 试 目的 是 保证 每 个 
模块 或 组 件 能 正常 工作 。 单 元 测试 主要 采用 白 盒 测试 方法 ,检测 程序 的 内 部 
结构 。 

。 集成 测试 : 也 称 组 装 测试 。 在 单元 测试 基础 上 ,对 已 测试 过 的 模块 进行 组 装 , 进 
行 集成 测试 。 测 试 目 的 是 检验 与 接口 有 关 的 模块 之 间 的 问题 。 集 成 测试 主要 采 
用 黑 盒 测试 方法 。 

。 确认 测试 : 也 称 有 效 性 测试 。 在 完成 集成 测试 后 ,验证 软件 的 功能 和 性 能 及 其 他 
特性 是 否 符合 用 户 要 求 。 测 试 目 的 是 保证 系统 能 够 按照 用 户 预定 的 要 求 工 作 。 
确认 测试 通常 采用 黑 盒 测试 方法 。 

。 系统 测试 : 在 完成 确认 测试 后 ,为 了 检验 它 能 和 否 与 实际 环境 (如 软 硬 件 平台 数据 
和 人 员 等 ) 协 调 工 作 ,还 需要 进行 系统 测试 。 可 以 说 ,系统 测试 之 后 ,软件 产品 基 
本 满足 开发 要 求 。 

。 验收 测试 : 测试 过 程 的 最 后 一 个 阶段 。 验 收 测试 主要 突出 用 户 的 作用 ,同时 软件 
开发 人 员 也 应 该 参与 进去 。 


2. 测试 人 员 组 织 
人 是 测试 工作 中 最 有 价值 也 是 最 重要 的 资源 ,没有 一 个 合格 的 负责 人 、 积 极 的 测试 小 
组 ,测试 就 不 可 能 实现 。 为 高 质 高 效 地 完成 测试 任务 ,应 该 组 织 测试 人 员 进 行 集体 学 习 ， 
做 到 如 下 几 点 : 
。 测试 项 目的 负责 人 必须 做 到 : 把 要 做 的 事情 理 清楚 ; 把 要 达到 的 目的 说 清楚 ; 把 
做 事情 的 思路 和 方法 理 清楚 ; 把 合理 的 资源 调配 到 合适 的 位 置 上 ,让 兴趣 和 能 力 
结合 。 只 有 从 大 的 方面 先 将 这 些 事情 理 清楚 了 , 才 可 能 使 得 一 个 团队 具有 非常 的 
战斗 力 。 测 试 项 目的 负责 人 应 该 组 织 测试 人 员 定 期 进行 培训 ,让 团队 的 每 个 人 都 
具备 应 有 的 沟通 能 力 、 技 术 能 力 、 自 信心 .怀疑 精神 、 自 我 督促 能 力 和 洞察 力 。 
。 组 织 测试 人 员 进 行 工 作 总 结 , 在 什么 地 方 容易 犯错 误 , 犯 什么 类 型 的 错误 ,犯错 误 
的 原因 是 什么 。 那 么 就 需要 对 各 种 错误 进行 统计 ,以 找到 问题 的 根本 原因 。 就 问 
题 而 讨论 问题 ,问题 的 实质 出 在 哪里 ,然后 改进 。 
组 织 测试 人 员 提 出 意见 。 如 果 一 个 团队 要 发 展 , 就 需要 大 家 一 起 努力 ,但 是 实际 
做 起 来 很 难 。 要 避免 一 言 堂 ,让 大 家 充分 参与 到 设计 中 ,在 其 中 找到 自己 的 价值 ， 
这 样 每 一 个 人 才能 关心 项 目的 每 一 个 角落 ,工作 才能 更 有 效率 。 


有 


软件 测试 教程 


3. 软件 测试 文件 组 织 

软件 测试 文件 描述 要 执行 的 软件 测试 及 测试 的 结果 。 由 于 软件 测试 是 一 个 很 复杂 的 
过 程 ,同时 也 是 设计 软件 开发 其 他 一 些 阶段 的 工作 ,对 于 保证 软件 的 质量 和 运行 有 着 重要 
意义 ,必须 把 对 它们 的 要 求 .过 程 及 测试 结果 以 正式 的 文件 形式 写 出 。 测 试 文件 的 编写 是 
测试 工作 规范 化 的 一 个 组 成 部 分 。 测 试 文件 不 只 在 测试 阶段 才 考虑 , 它 在 软件 开发 的 需 
求 分 析 阶 段 就 开始 着 手 ,因为 测试 文件 与 用 户 有 着 密切 的 关系 。 在 软件 设计 阶段 的 一 些 
设计 方案 也 应 在 测试 文件 中 得 到 反映 ,以 利于 设计 的 检验 。 测 试 文件 对 于 测试 阶段 工作 
的 指导 与 评价 作用 更 是 非常 明显 的 。 需 要 特别 指出 的 是 ,在 已 开发 的 软件 投入 运行 的 维 
护 阶段 ,常常 还 要 进行 再 测试 或 回归 测试 ,这 时 仍然 需要 用 到 测试 文件 。 

(1) 测试 文件 的 类 型 

根据 测试 文件 所 起 的 作用 不 同 ,通常 把 测试 文件 分 成 两 类 , 即 测试 计划 和 测试 分 析 报 
告 。 测 试 计划 详细 规定 测试 的 要 求 , 包 括 测试 的 目的 和 内 容 、 方 法 和 步骤 ,以 及 测试 的 准 
则 等 。 由 于 要 测试 的 内 容 可 能 涉及 软件 的 需求 和 软件 的 设计 ,因此 必须 及 早 开始 测试 计 
划 的 编写 工作 。 通 常 ,测试 计划 的 编写 从 需求 分 析 阶 段 开 始 , 到 软件 设计 阶段 结束 时 完 
成 。 测 试 分 析 报 告 用 来 对 测试 结果 进行 分 析 说 明 , 经 过 测试 后 ,证 实 了 软件 具有 的 能 力 ,以 
及 它 的 缺陷 和 限制 ,并 给 出 评价 的 结论 性 意见 ,这 些 意 见 既是 对 软件 质量 的 评价 ,又 是 决定 
该 软件 能 否 交 付 用 户 使 用 的 依据 。 由 于 要 反映 测试 工作 的 情况 ,自然 要 在 测试 阶段 内 编写 。 

(2) 测试 文件 的 使 用 

测试 文件 的 重要 性 表现 在 以 下 几 个 方面 。 

。 验证 需求 的 正确 性 : 测试 文件 中 规定 了 用 以 验证 软件 需求 的 测试 条 件 ,研究 这 些 
测试 条 件 对 弄 清 用 户 需求 是 十 分 有 益 的 。 
检验 测试 资源 : 测试 计划 不 仅 要 用 文件 的 形式 把 测试 过 程 规定 下 来 ,还 应 说 明 测 
试 工作 必 不 可 少 的 资源 ,进而 检验 这 些 资源 是 否 可 以 得 到 , 即 它 的 可 用 性 如 何 。 
如 果 某 个 测试 计划 已 经 编写 出 来 ,但 所 需 资 源 仍 未 落实 , 那 就 必须 及 早 解决 。 
明确 任务 的 风险 : 有 了 测试 计划 ,就 可 以 和 弄 清 楚 测试 可 以 做 什么 ,不 能 做 什么 。 了 
解 测试 任务 的 风险 有 助 于 对 潜伏 的 可 能 出 现 的 问题 事先 做 好 思想 上 和 物质 上 的 准备 。 
生成 测试 用 例 : 测试 用 例 的 好 坏 决 定 着 测试 工作 的 效率 ,选择 合适 的 测试 用 例 是 
做 好 测试 工作 的 关键 。 在 测试 文件 编制 过 程 中 , 按 规定 的 要 求 精心 设计 测试 用 例 
有 重要 的 意义 。 
评价 测试 结果 : 测试 文件 包括 测试 用 例 , 即 若干 测 试 数据 及 对 应 的 预期 测试 结 
果 , 完 成 测试 后 ,将 测试 结果 与 预期 的 结果 进行 比较 , 便 可 对 已 进行 的 测试 提出 评 
价 意 见 。 
。 再 测试 : 测试 文件 规定 和 说 明 的 内 容 对 于 后 面 维护 阶段 由 于 各 种 原因 的 需求 进 

行 再 测试 时 ,是 非常 有 用 的 。 


. 
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。 决定 测试 的 有 效 性 : 完成 测试 后 ,把 测试 结果 写 入 文件 ,这 对 分 析 测 试 的 有 效 性 ， 
甚至 整个 软件 的 可 用 性 提供 了 依据 。 同 时 还 可 以 证 实 有 关 方面 的 结论 。 

(3) 测试 文件 的 编制 

在 软件 的 需求 分 析 阶 段 ,就 开始 测试 文件 的 编制 工作 ,各 种 测试 文件 的 编写 应 按 一 定 
的 格式 进行 。 
7.2.2 软件 测试 的 管理 

在 7.1 节 中 介绍 了 软件 测试 是 软件 质量 保证 的 关键 步骤 。 为 了 真正 做 好 软件 测试 工 
作 , 系 统 地 建立 一 个 软件 测试 管理 体系 是 非常 重要 的 ,只 有 这 样 才能 确保 软件 测试 在 软件 
质量 保证 中 发 挥 应 有 的 关键 作用 。 

建立 软件 测试 管理 体系 有 以 下 几 个 方面 。 

。 确定 软件 测试 的 每 个 阶段 : 制定 测试 计划 、 测 试 设计 、 实 施 测试 、 建 立 和 更 新 测试 
文档 以 及 测试 管理 。 
确定 阶段 间 的 相互 关系 。 制 定 测试 计划 、 测 试 设计 、 实 施 测试 三 个 阶段 是 按 顺序 
依次 进行 并 且 相 互 作用 ,阶段 间 衔 接 是 规范 化 的 , 即 每 个 阶段 有 开始 标志 和 结束 
标志 。 测 试管 理 是 对 这 三 个 阶段 进行 监督 和 管理 。 建 立 和 更 新 测试 文档 则 贯穿 
于 整个 测试 流程 。 

。 确定 进行 各 阶段 测试 所 需要 的 标准 和 策略 ,掌握 其 相关 文档 。 

。 确定 监督 ,管理 和 控制 各 测试 阶段 的 准则 和 方法 。 

。 确保 可 以 获得 必要 的 资源 和 信息 ,以 支持 测试 流程 的 正常 进行 和 监督 工作 的 顺利 

开展 。 

。 为 了 提高 测试 质量 ,实行 适当 改进 措施 。 

软件 测试 管理 的 主要 内 容 如 下 : 

(1) 软件 产品 的 监督 和 测量 

对 软件 产品 的 质量 特性 进行 监督 和 测量 ,主要 依据 软件 需求 规格 说 明 书 ,验证 产品 是 
否 满足 要 求 ; 所 开发 的 软件 产品 是 否 可 以 交付 。 要 预先 设 定 质 量度 量 指标 并 进行 测试 ， 
只 有 符合 预先 设 定 的 指标 才 可 以 交付 。 

(2) 对 不 符合 要 求 产 品 的 识别 和 控制 

对 于 软件 测试 中 发 现 的 软件 缺陷 ,要 认真 记录 它们 的 属性 和 处 理 办 法 ,并 进行 跟踪 ， 
直至 最 终 解决 。 在 修复 软件 缺陷 之 后 ,要 再 次 进行 验证 测试 。 

(3) 软件 过 程 的 监督 和 测量 

从 软件 测试 中 可 以 获取 大 量 关于 软件 过 程 及 其 结果 的 数据 和 信息 ,它们 可 用 于 判断 
这 些 过 程 的 有 效 性 ,为 软件 过 程 的 正常 运行 和 持续 改进 提供 决策 依据 。 

(4) 产品 设计 和 开发 的 验证 

通过 设计 测试 用 例 对 需求 分 析 .软件 设 计 、 程 序 代 码 进行 验证 ,确保 程序 代码 与 软件 
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设计 说 明 书 一 致 ,软件 设计 说 明 书 与 需求 规格 说 明 书 一 致 。 对 于 验证 中 发 现 的 不 合格 现 
象 ,同样 要 认真 记录 和 处 理 ,并 跟踪 解决 。 解 决 之 后 ,也 要 再 次 进行 验证 。 
7.2.3 测试 团队 总 的 职责 

组 织 一 支 优秀 的 测试 团队 是 做 好 软件 测试 工作 的 基本 保障 。 良 好 的 组 织 结构 和 人 员 
划分 会 促进 测试 工作 的 顺利 开展 和 实施 ,提高 软件 测试 的 效率 和 质量 ,从 而 大 大 提高 软件 
产品 的 开发 效率 和 产品 质量 。 

在 科学 的 管理 体系 下 ,软件 测试 团队 各 个 成 员 要 明确 自身 责任 , 既 要 完成 本 职工 作 又 
要 相互 协调 好 ,为 整个 测试 流程 负责 。 软 件 测试 人 员 的 基本 责任 应 该 包括 : 

(1) 尽早 发 现 软件 产品 中 的 所 有 问题 。 

(2) 督促 软件 开发 人 员 及 时 解决 测试 中 发 现 的 缺陷 。 

除了 上 述 两 个 基本 责任 ,软件 测试 团队 的 责任 还 包括 : 

(1) 帮助 项 目 管理 人 员 制 定 合 理 的 产品 开发 计划 。 

(2) 对 软件 产品 中 的 问题 进行 分 析 和 跟踪 调查 ,形成 文档 ,以 便 让 项 目 管理 人 员 和 相 
关 产 品 开发 人 员 对 当前 产品 的 质量 情况 有 全 面 的 了 解 。 

(3) 协助 完善 软件 开发 流程 ,提高 产品 开发 的 效率 。 
7.2.4 软件 开发 和 测试 过 程 的 组 织 结构 与 职责 划分 

如 图 7-1 所 示 是 软件 开发 和 测试 过 程 中 的 组 织 结构 。 参 与 整个 软件 生产 流程 的 人 员 
种 类 很 多 ,结构 图 中 列举 了 代表 性 的 开发 和 测试 人 员 。 其 中 ,产品 经 理 和 产品 开发 代表 是 
核心 领导 。 以 软件 开发 经 理 为 首 的 开发 部 门 和 以 软件 测试 经 理 为 首 的 测试 部 分 既 各 有 分 
工 又 需要 相互 合作 ,共同 开发 软件 ,确保 软件 质量 符合 设计 标准 。 


产品 开发 代表 
软件 开发 经 理 软件 测试 经 理 
软件 开发 项 目 经 理 软件 测试 项 目 经 理 
程序 员 测试 员 


图 7-1 软件 开发 和 测试 过 程 中 的 组 织 结构 
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在 需求 分 析 阶 段 中 ,软件 开发 人 员 的 职责 如 下 : 

(1) 软件 开发 项 目 经 理 的 职责 

。 带领 项 目 组 分 析 审 核 工 作 任务 书 ， 

。 带领 项 目 组 与 系统 工程 师 进行 需求 交流 并 进行 分 析 和 文档 化 ; 
。 需求 跟踪 。 

(2) 软件 开发 工程 师 的 职责 

。 完成 软件 需求 说 明 书 (SRS) 文 档 ; 

。 完成 需求 跟踪 ; 

。 参加 SRS 审查 ; 

。 根据 SRS 评审 专家 意见 ,修改 SRS 文档 。 

(3) 开发 代表 的 职责 

。 与 项 目 组 一 起 审查 项 目 任务 书 ; 

。 在 评审 结束 后 ,批准 SRS 文档 。 

在 需求 分 析 阶 段 中 ,软件 测试 人 员 的 职责 如 下 : 

(1) 质量 保证 /软件 测试 经 理 的 职责 

。 监督 项 目 组 遵循 需求 管理 流程 ; 

。 参加 SRS 审查 ; 

。 保证 相关 组 参加 SRS 审查 。 

(2) 软件 测试 项 目 经 理 的 职责 

。 参与 开发 人 员 的 软件 需求 分 析 , 提 出 可 测试 性 需求 ; 
。 组 织 人 员 参 与 SRS 的 评审 工作 ; 

。 组 织 软 件 系 统 测试 计划 写作 ; 

。 组织 软件 系统 测试 方案 写作 。 

(3) 软件 测试 工程 师 的 职责 

。 参与 SRS 评审 工作 ; 

。 协助 软件 测试 项 目 经 理 完成 软件 系统 测试 计划 写作 ; 
。 协助 软件 测试 经 理 完 成 软件 系统 测试 方案 写作 。 
在 软件 设计 阶段 中 ,软件 开发 人 员 的 职责 如 下 : 

(1) 软件 开发 项 目 经 理 的 职责 

。 在 项 目 计划 中 标识 设计 活动 并 确保 有 足够 的 资源 ; 
。 从 项 目 成 员 中 标识 出 设计 人 员 ,负责 设计 工作 ; 

。 确保 设计 人 员 按 照 本 流程 开发 相应 的 设计 说 明 书 (HLD 和 LLD); 
。 确保 按照 审查 规程 进行 设计 的 审查 ; 

。 批准 设计 说 明 书 (HLD 和 LLD); 


-~ 
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。 确保 更 新 了 需求 跟踪 矩阵 ; 

。 确保 设计 文档 按照 配置 管理 流程 来 控制 。 

(2) 软件 开发 工程 师 的 职责 

。 完成 设计 文档 ; 

。 完成 需求 跟踪 ; 

。 参加 设计 文档 审查 ; 

。 根据 评审 专家 意见 ,修改 设计 文档 。 

(3) 相关 评审 专家 的 职责 

。 针对 设计 文档 ,提交 评审 意见 

。 参加 设计 文档 的 评审 会 议 ; 

。 确认 修改 后 的 意见 。 

在 软件 设计 阶段 中 ,软件 测试 人 员 的 职责 如 下 : 

(1) 质量 保证 /软件 测试 经 理 的 职责 

。 监督 项 目 组 遵循 软件 设计 流程 ; 

。 参加 设计 审查 ; 

。 保证 相关 组 参加 设计 审查 。 

(2) 软件 测试 项 目 经 理 的 职责 

。 组 织 所 有 的 测试 活动 ; 

。 制定 测试 策略 ; 

。 确保 测试 活动 有 合适 的 计划 ; 

。 审核 并 批准 单元 测试 和 集成 测试 的 测试 计划 ; 

。 确保 所 有 分 配 需求 被 跟踪 和 验证 ; 

。 确保 测试 策略 在 签发 后 基线 化 ,单元 测试 计划 (CUTP) 、 集 成 测试 计划 (ITP)、 系 统 

测试 计划 (STP) 在 审查 和 批准 后 基线 化 。 
说 明 : 基线 是 指 一 个 被 正式 评审 和 批准 的 规格 和 产品 ,作为 进一步 开发 的 一 个 基础 ， 
并 且 必 须 通 过 正式 的 变更 流程 来 变更 。 

(3) 软件 测试 工程 师 职责 

。 准备 测试 计划 (STP/UTP/ITP); 

。 撰写 单元 测试 (UT)/ 集 成 测试 (IT)/ 系 统 测试 (ST) 的 测试 用 例 ; 
。 完成 需求 跟踪 。 
软件 测试 执行 阶段 ,软件 测试 人 员 的 职责 如 下 : 

(1) 软件 开发 项 目 经 理 的 职责 

。 确保 缺陷 分 发 给 相关 软件 工程 师 并 及 时 得 到 解决 ; 
。 参与 需求 变更 评审 。 
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(2) 软件 开发 工程 师 的 职责 

。 修正 缺陷 ; 

。 验证 相关 的 缺陷 已 经 被 修正 。 

(3) 软件 测试 项 目 经 理 的 职责 

。 组 织 所 有 的 测试 活动 ; 

。 确保 选择 适合 的 测试 工具 以 及 测试 环境 的 建立 ; 
。 确保 测试 活动 的 计划 得 到 执行 和 获得 资源 ; 

。 确保 缺陷 分 发 给 相关 软件 工程 师 并 及 时 得 到 解决 ; 
。 审核 并 批准 测试 报告 ; 

。 审核 并 批准 测试 状态 报告 。 

(4) 软件 测试 工程 师 的 职责 

。 搭建 测试 环境 ; 

。 执行 测试 用 例 ; 

。 将 测试 中 发 现 的 所 有 缺陷 填写 在 缺陷 报告 中 ; 
， 回归 测试 ; 

。 准备 测试 报告 

。 测试 期 间 ,每 周 准备 测试 状态 报告 。 


7.3 ISO 9000 标准 


与 软件 质量 管理 和 质量 保证 方面 相关 的 是 当前 国际 惯用 的 ISO 9000 系列 标准 。 软 
件 测试 人 员 可 以 以 此 系列 标准 规范 .约定 软件 的 开发 过 程 ,提高 软件 产品 质量 。 

ISO 9000 系列 标准 是 ISO 国际 标准 化 组 织 TC/176 技术 委员 会 制定 的 所 有 国际 标 
准 , 其 中 的 核心 标准 是 质量 保证 标准 (ISO 9001/2/3) 和 质量 管理 标准 (ISO 9004)。 它 们 
小 到 螺栓 .螺母 ,大 到 质量 管理 和 质量 保证 等 所 有 制造 行业 设立 标准 。 

具体 说 ,ISO 9001 质量 体系 是 为 设计 、 开 发、 生产、 安装 和 售后 服务 提供 质量 保证 模 
式 ; ISO 9002 质量 体系 是 为 生产 和 安装 提供 质量 保证 模式 ; ISO 9003 质量 体系 是 为 计算 
机 软件 的 开发 ,测试 、 供 应 、 安 装 和 维护 提高 质量 保证 模式 ; ISO 9004 是 质量 管理 和 质量 
体系 要 素 导 则 。 

上 述 ISO 9000 系列 标准 可 分 为 两 类 : ISO 9001~ISO 9003 作为 第 一 类 用 于 建立 客 
户 对 生产 商 质 量 要 求 的 保证 ; ISO 9004 作为 第 二 类 用 于 生产 商 自身 建立 质量 保证 体系 。 
ISO 9001 ISO 9002 和 ISO 9003 的 作用 范围 由 大 到 小 ,ISO 9001 包括 从 产品 开发 到 售后 
服务 的 全 程 质量 要 求 保证 ,作用 范围 最 大 。ISO 9002 其 次 ,ISO 9003 再 次 之 。 

ISO 9000 系列 标准 的 两 个 主要 特点 是 : 


区 
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(1) 它 的 目标 在 于 整个 产品 流程 的 控制 ,从 开始 设计 、 生 产 、 产 品 销售 到 产品 服务 ,都 
有 相关 质量 保证 规范 。 如 果 生 产 的 全 过 程 得 到 很 好 的 控制 并 达到 约定 的 质量 要 求 ,那么 
最 终 的 产品 质量 就 得 到 了 保证 。 

(2) 产品 缺陷 的 提早 预防 。 整 个 生产 过 程 中 有 效 预防 漏洞 的 出 现 并 且 按照 系列 标准 
不 断 进 行 产品 自身 完善 ,做 到 防 患 于 未 然 , 大 大 减少 甚至 杜绝 了 不 合格 产品 。 

ISO 9000 标准 中 针对 软件 开发 产业 的 部 分 是 ISO 9001 和 ISO 9003。ISO 9001 针对 
设计 ,开发 .生产 ,安装 和 服务 产品 ,而 ISO 9003 则 针对 开发 ,供应 ,安装 和 维护 软件 产品 。 
ISO 9003 作为 软件 企业 实施 ISO 9001 质量 保证 模式 提供 实施 指南 , 它 对 软件 产品 从 市 
场 调查 .需求 分 析 、 软 件 设计 、 编 码 ,测试 等 各 个 开发 阶段 进行 质量 保证 控制 ,也 对 产品 发 
布 .销售 成品 安装 和 维护 过 程 进行 规范 控制 ,从 而 保证 软件 产品 的 整体 质量 。 

ISO 9003 标准 的 主要 内 容 : 

。 开发 详细 的 质量 计划 和 程序 控制 配置 管理 ,产品 验证 ,不 规范 行为 (缺陷 ) 和 纠正 
措施 (修复 ); 
准备 和 接收 软件 开发 计划 ,包括 项 目 定义 .产品 目标 清单 项 目 进 度 .产品 说 明 书 ， 
如 何 组 织 项 目的 描述 ,风险 和 假设 的 讨论 以 及 控制 策略 等 ; 

。 使 用 客户 易 理解 的 且 测 试 时 易 进 行 合法 性 检查 的 用 语 来 表述 说 明 书 ， 
。 计划, 开发 ,编制 和 实施 软件 设计 审查 程序 ; 

。 开发 控制 软件 设计 随 产品 生命 周期 而 发 生变 化 的 程序 ; 
。 开发 和 编制 软件 测试 计划 ; 

。 开发 检测 软件 是 否 满足 客户 要 求 的 方法 ; 

。 实施 软件 验证 和 接收 式 测试 ; 

。 维护 测试 结果 的 记录 ; 

。 解决 软件 缺陷 的 方式 ; 

。 证明 产 品 在 发 布 之 前 已 经 就 绪 ; 

。 开发 控制 产品 发 布 过 程 的 程序 ; 

。 明确 指出 和 规定 应 该 收集 的 质量 信息 ; 

。 应 用 统计 技术 分 析 软 件 开发 过 程 评 估 软 件 产品 质量 。 


7.4 能力 成 熟 度 模型 (CMM) 


CMM(Capability Maturity Model) 即 软件 能 力 成 熟 度 模 型 ,是 软件 行业 标准 模型 ,用 
来 定义 和 评价 软件 公司 开发 过 程 的 成 熟 度 ,为 如 何 提高 软件 质量 提供 指导 。CMM 是 在 
美国 国防 部 领导 下 ,由 软件 开发 团体 和 卡耐基 一 梅 隆 大 学 的 软件 工程 学 院 (SEI) 共 同 开 
发 的 ,1991 年 推出 CMM 1.0 版 ,1993 年 推出 CMM 1. 1 版。 
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CMM 的 主要 特点 是 通用 性 好 , 它 适 用 于 各 种 规模 的 软件 公司 ,从 大 规模 的 公司 集体 
到 个 人 均 可 使 用 。 它 的 5 个 等 级 为 评估 软件 开发 成 熟 度 提供 了 简单 的 方法 ,确定 了 进入 
下 一 个 成 熟 度 等 级 的 关键 标志 。 

CMM 将 软件 过 程 能 力 成 熟 度 划 分 为 5 个 等 级 ,如 图 7-2 所 示 。 每 个 等 级 定义 一 组 过 
程 能 力 目标 ,并 且 表述 了 能 够 达到 这 些 过 程 能 力 目标 的 实践 活动 。 依 据 CMM 模型 ,软件 
开发 人 员 能 够 更 好 地 按照 计划 高 效率 地 开发 出 有 质量 保证 的 软件 产品 。 

(1) 等 级 1( 初 始 级 ) 

该 等 级 的 软件 开发 过 程 是 随意 的 ,甚至 是 混乱 的 。 项 目 能 和 否 成 功 依靠 个 人 的 能 力 和 
运气 ,具有 偶然 性 。 软 件 开发 过 程 没有 定义 ,没有 通用 计划 ,难以 监视 和 控制 。 开 发 的 时 
间 和 费用 无 法 预知 。 测 试 过 程 和 其 他 过 程 混杂 在 一 起 。 

(2) 等 级 2( 可 重复 级 ) 

该 等 级 成 熟 度 主 要 集中 在 项 目 级 。 建 立 基 本 的 项 目 管理 过 程 去 跟踪 成 本 、 进 度 .功能 
和 质量 。 可 以 借鉴 以 前 成 功 项 目的 经 验 ,应 用 到 新 项 目 中 。 软 件 开发 具有 一 定 的 组 织 性 ， 
使 用 了 基本 软件 测试 行为 ,例如 测试 计划 和 测试 用 例 。 

(3) 等 级 3( 已 定义 级 ) 

该 等 级 具备 了 组 织 化 思想 ,而 不 仅仅 是 针对 具体 项 目 。 软 件 开 发 中 的 管理 活动 和 工 
程 活动 被 文档 化 和 标准 化 ,并 且 形 成 整个 软件 组 织 的 标准 软件 过 程 。 所 有 项 目 均 在 标准 
软件 过 程 中 进行 。 

(4) 等 级 4( 已 管理 级 ) 

在 该 成 熟 度 等 级 中 ,组 织 过 程 处 于 在 统计 的 控制 下 。 软 件 过 程 和 产品 质量 有 具体 的 
度量 标准 ,软件 过 程 和 产品 质量 得 到 了 定量 理解 和 控制 。 

(5) 等 级 5( 优 化 级 ) 

通过 来 自 过 程 新 技术 和 新 思想 等 各 方面 的 定量 信息 反馈 ,能 够 进行 持续 的 过 程 改 
进 ,以 期 达到 质量 更 佳 的 等 级 。 

CMM 的 分 层 结构 为 软件 公司 开发 产品 提供 了 不 同等 级 的 可 行 性 目标 ,达到 了 某 一 
级 设 定 的 等 级 目标 ,就 达到 了 这 个 成 熟 度 等 级 ,自然 可 以 进入 下 一 级 。 等 级 1 是 基础 ,大 
多 数 机 构 的 软件 过 程 开 发 环境 还 相当 不 成 熟 , 还 都 自然 处 于 这 个 基础 上 。 根 据 是 否 真正 
采用 成 熟 的 软件 过 程 来 衡量 ,全 世界 大 多 数 软件 公司 的 能 力 成 熟 度 为 1 级 ,多 数 为 2 级 ， 
少数 为 3 级, 极 少数 为 4 级 ,能 力 成 熟 度 为 5 级 的 软件 公司 更 是 凤 毛 和 刨 角 。5 个 等 级 如 
图 7-2 所 示 ,为 评测 软件 公司 开发 能 力 成 熟 度 提供 了 简单 的 方式 。 

CMM 和 ISO 9000 系列 标准 都 是 用 来 管理 产品 的 生产 过 程 ,监督 产品 的 质量 和 性 
能 。 它 们 的 共同 点 是 注重 产品 是 否 符合 设计 说 明 书 ,是 否 达 到 用 户 的 预期 要 求 。 它 们 的 
不 同 点 是 ,CMM 强调 产品 生产 过 程 的 持续 改进 ,ISO 9000 系列 (关于 软件 开发 和 测试 部 
分 ) 强 调 产 品 达到 质量 要 求 的 基本 准则 。 当 然 , 在 ISO 9000 系列 中 也 含有 关于 生产 过 程 
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i 人 友人 和 新 拉 术 不 
过 程 
a 可 控制 管理 。 对 过 程 和 软件 
本 4 已 管理 级 | | 产品 质量 有 具体 的 量度 标准 。 
过 程 
3. 已 定义 级 
有 标准 
过 各 
2. 可 重复 级 
无 定义 
过 程 


过 程 混乱 ,项 目 成 功 具 有 
- 介 ° 


图 7-2 CMM 软件 成 熟 度 等 级 


持续 改进 的 问题 的 部 分 。 所 以 ,两 者 是 既 有 联系 又 有 区 别 。 

作为 软件 公司 ,不 论 通过 CMM 评估 还 是 获得 ISO 9000 系列 认证 ,都 是 为 了 保证 软 
件 开 发 的 质量 以 及 不 断 改进 产品 ,这样 才 能 满足 用 户 需求 ,适应 市 场 变化 ,从 而 获取 竞争 
优势 。 


小 结 


软件 测试 是 有 组 织 和 有 管理 的 软件 质量 保证 活动 ,而 不 是 随意 的 、 松 散 的 、 杂 乱 的 实 
施 过 程 。 软 件 质量 保证 就 是 通过 对 软件 产品 有 计划 地 进行 检查 和 审计 来 验证 软件 是 否 合 
乎 标准 ,设计 改进 方案 ,从 而 杜绝 软件 缺陷 的 产生 。 软 件 质量 保证 部 门 有 责任 监督 测试 流 
程 ,保证 测试 工作 的 客观 性 ,同时 也 有 助 于 测试 流程 的 改进 。 而 软件 测试 是 提高 软件 质量 
的 关键 环节 。 
建立 科学 的 软件 测试 管理 体系 是 非常 重要 的 ,只 有 这 样 才 能 确保 软件 测试 在 软件 质 
量 保证 中 发 挥 应 有 的 重要 作用 。 要 想 实 现 良好 的 测试 管理 ,就 要 对 测试 团队 进行 系统 地 
组 织 和 明确 地 职责 划分 。 

ISO 9000 系列 标准 是 ISO 国际 标准 化 组 织 制定 的 国际 标准 , 它 为 所 有 制造 行业 设立 
了 质量 管理 和 质量 保证 等 标准 。ISO 9003 质量 体系 是 为 软件 产品 的 开发 和 测试 提供 质 
量 保证 模式 ,可 以 作为 软件 测试 的 质量 保证 规范 。 
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软件 能 力 成 熟 度 CMM 作为 软件 行业 的 标准 模型 ,可 以 定义 和 评价 软件 公司 开发 过 
程 的 成 熟 度 ,为 提高 软件 质量 提供 指导 。 


习题 
1. 质量 保证 部 门 与 测试 部 门 的 职责 是 否 一 样 ? 归纳 它们 的 共同 点 和 不 同 点 。 


2. ISO 9000 标准 与 软件 测试 的 关系 是 什么 ? 
3. 简 述 CMM 的 具体 等 级 划分 。 


站 
2 
山 


面向 对 象 的 软件 测试 


本 章 概述 

面向 对 象 程序 的 结构 不 再 是 传统 的 功能 模块 结构 , 它 将 开发 分 为 面向 对 象 分 析 、 面 向 
对 象 设计 和 面向 对 象 编程 三 个 阶段 。 分 析 阶 段 产生 整个 问题 空间 的 抽象 描述 ,在 此 基础 
上 ,进一步 归纳 出 适用 于 面向 对 象 编程 语言 的 类 和 类 结构 ,最 后 形成 代码 。 针 对 面向 对 象 
软件 的 开发 特点 ,其 测试 方法 和 技术 也 必然 要 做 相应 的 改变 。 本 章 主要 介绍 了 面向 对 象 
软件 的 特点 ; 面向 对 象 软件 测试 与 传统 软件 测试 的 区 别 ; 面向 对 象 的 测试 方法 以 及 类 测 
试用 例 设计 的 方法 。 


8.1 面向 对 象 的 软件 测试 概述 


自 20 世纪 80 年 代 后 期 以 来 ,面向 对 象 软件 开发 技术 发 展 迅速 ,获得 了 越 来 越 广泛 的 
应 用 ,在 面向 对 象 的 分 析 、 设 计 技术 以 及 面向 对 象 的 程序 设计 语言 方面 , 均 获 得 了 很 丰富 
的 研究 成 果 与 工程 实际 应 用 。 

与 之 相 比 较 , 面 向 对 象 软件 测试 技术 的 研究 还 相对 薄弱 。 基 于 结构 的 传统 集成 策略 
并 不 完全 适 于 面向 对 象 的 程序 。 这 是 因为 面向 对 象 的 程序 的 执行 实际 上 是 执行 一 个 由 消 
息 连 接 起 来 的 方法 序列 ,而 这 个 方法 序列 往往 是 由 外 部 事件 驱动 的 。 在 面向 对 象 语言 
虽然 信息 隐藏 和 封装 机 制 使 得 类 具有 较 好 的 独立 性 ,有 利于 提高 软件 的 易 测 试 性 和 保证 
软件 的 质量 ,但 是 ,信息 的 隐藏 和 封装 机 制 与 继承 机 制 及 动态 绑 定 给 软件 测试 带 来 了 新 的 
课题 。 尤 其 是 面向 对 象 软件 中 类 与 类 之 间 的 集成 测试 和 类 中 各 个 方法 之 间 的 集成 测试 具 
有 特别 重要 的 意义 ,与 传统 语言 书写 的 软件 相 比 ,集成 测试 的 方法 和 策略 也 应 该 有 所 
不 同 。 

从 目前 的 研究 及 测试 实际 现状 来 看 , 较 多 地 集中 在 类 和 对 象 状 态 的 测试 方面 。 面 向 
对 象 程序 设计 的 继承 和 动态 绑 定 所 带 来 的 多 态 性 对 软件 测试 的 影响 虽然 也 有 所 研究 ,但 
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是 不 仅 缺乏 针对 这 一 特点 的 测试 方法 ,而 且 还 有 许多 问题 有 待 进一步 研究 。 

软件 测试 中 的 另 一 个 重要 问题 是 测试 的 充分 性 问题 ,充分 性 准则 对 软件 测试 发 现 错 
误 的 能 力 具有 重要 影响 。 对 传统 语言 的 软件 测试 已 经 存在 多 种 充分 性 准则 ,但 对 面向 对 
象 的 软件 测试 ,目前 还 没有 普遍 接受 的 充分 性 准则 。 


8.2 面向 对 象 的 软件 


为 了 充分 说 明 面向 对 象 软件 测试 的 基本 问题 和 解决 策略 ,首先 来 回顾 一 下 面向 对 象 
及 面向 对 象 程序 设计 的 有 关 基 本 概念 。 
(1) 对 象 
对 象 是 一 个 可 操作 的 实体 , 它 既 包含 了 特定 的 数据 ,也 包含 了 操作 这 些 数据 的 代码 。 
对 象 是 一 个 可 计算 的 基本 实体 ,将 那些 协作 解决 某 类 问题 的 对 象 组 成 对 象 群 (集合 ) 。 当 
一 个 程序 被 执行 时 ,对 象 被 创建 .修改 .访问 或 因为 协作 的 结果 而 被 删除 。 程 序 中 的 对 象 
是 一 些 问题 及 其 解决 方法 的 特定 实体 的 描述 。 对 象 具有 生命 周期 。 
对 象 是 软件 开发 期 间 测试 的 直接 目标 。 在 程序 运行 时 ,对 象 的 行为 是 否 符合 它 的 规 
定 说 明 ,该 对 象 与 和 它 相 关 的 对 象 是 否 协同 工作 ,这 两 个 方面 是 面向 对 象 软件 测试 所 关注 
的 焦点 。 
(2) 类 
类 是 一 些 具有 共性 的 对 象 集合 。 类 可 看 做 是 创建 对 象 的 模板 。 面 向 对 象 程序 运行 的 
基本 元 素 是 对 象 ,而 类 则 是 用 来 定义 对 象 这 一 基本 元 素 的 。 创 建 对 象 的 过 程 被 称 作 实例 
化 ,创建 的 结果 就 是 实例 。 在 类 中 ,所 有 对 象 的 基本 概念 基本 相同 ,可 从 两 个 方面 描述 : 
。 在 类 的 声明 中 ,定义 了 每 个 对 象 能 做 什么 ; 
。 在 类 的 实现 中 ,定义 了 类 的 每 个 对 象 如 何 做 它们 将 做 的 东西 , 即 描述 对 象 如 何 表 
现 它 的 属性 。 
(3) 接口 
接口 是 行为 声明 的 集合 。 行 为 被 集中 在 一 起 ,并 通过 单个 的 概念 定义 相关 的 动作 。 
接口 是 由 一 些 规范 构成 的 ,规范 定义 了 类 的 一 套 完 整 的 公共 行为 。 
从 测试 的 角度 ,关于 接口 有 下 面 的 结论 : 
。 接口 封装 了 操作 的 说 明 。 如 果 这 一 接口 包含 的 行为 和 类 的 行为 不 相符 ,那么 这 一 
接口 的 说 明 就 有 问题 。 
。 接口 非 孤立 , 它 与 其 他 的 接口 和 类 有 一 定 的 关系 。 一 个 接口 可 以 指定 一 个 行为 的 
参数 类 型 ,使 得 实现 该 接口 的 类 可 被 当 作 一 个 参数 进行 传递 。 
(4) 封装 
为 有 效 地 使 用 面向 对 象 的 程序 方法 .首先 需要 解决 程序 的 结构 设计 问题 。 在 程序 设 
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计 过 程 中 最 重要 的 是 抽象 ,也 就 是 说 ,从 现实 世界 中 抽象 出 合理 的 对 象 结 构 。 在 面向 对 象 
思想 中 ,抽象 决定 了 对 象 的 属性 .内 部 结构 以 及 处 理 对 象 的 外 部 接口 。 
从 程序 语言 角度 来 看 ,在 一 个 对 象 中 代码 和 (或 ) 数 据 可 以 是 这 个 对 象 私 有 的 ,不 能 被 
对 象 外 的 部 分 直接 访问 。 因 而 对 象 提供 了 一 种 高 级 保护 以 防止 程序 被 无 关 部 分 错误 修改 
或 错误 地 使 用 了 对 象 的 私有 部 分 。 当 从 对 象 外 部 试图 直接 对 受 保护 的 内 部 数据 进行 修改 
时 ,将 被 程序 拒绝 ,只 有 通过 对 象 所 提供 的 对 外 服务 函数 才能 够 对 其 内 部 数据 进行 必要 的 
加 工 , 从 而 保证 了 数据 加 工 的 合法 性 。 从 这 一 意义 上 讲 , 把 这 种 代码 和 数据 的 联系 称 为 
“封装 ”。 换 句 话 说 ,封装 是 将 对 象 封闭 保护 起 来 ,是 将 内 部 细节 隐藏 起 来 的 能 力 。 
(5) 继承 
继承 是 类 的 一 种 联系 ,允许 一 个 新 的 类 在 一 个 已 有 的 类 的 基础 上 进行 定义 。 一 个 类 
对 另 一 个 类 的 依赖 ,使 已 有 的 类 的 说 明和 实现 可 被 复 用 。 新 类 主要 是 子 类 或 继承 类 (C++ 
中 )。 被 继承 的 类 称 作 父 类 或 者 是 基 类 。 
从 测试 的 角度 来 看 ,继承 包含 以 下 内 容 : 
。 继承 提供 一 种 机 制 ,通过 这 种 机 制 , 潜 在 的 错误 能 够 从 一 个 类 传递 到 它 的 派生 类 。 
。 子 类 是 从 父 类 继承 过 来 的 ,所 以 子 类 也 就 继承 了 父 类 的 说 明和 实现 。 因 此 ,可 以 
用 测试 父 类 的 方法 对 子 类 进行 测试 。 
(6) 多 态 
多 态 提 供 了 将 对 象 看 做 是 一 种 或 多 种 类 型 的 能 力 。 它 定义 了 用 来 支持 多 种 不 同类 型 
所 适应 的 策略 。 多 态 支持 灵活 的 程序 设计 ,同时 也 易于 维护 。 多 态 分 为 包含 多 态 与 参数 
包含 多 态 是 同一 个 类 具有 不 同 表现 形式 的 一 种 现象 ,使 得 参数 具有 替换 的 能 力 。 为 
了 响应 操作 请 求 , 当 对 象 的 定义 与 后 续 对 象 的 定义 相符 时 ,对 象 就 可 以 被 相互 替换 。 换 句 
话说 ,面向 对 象 程序 中 的 发 送 者 能 够 在 用 对 象 作为 参数 时 根据 接口 进行 实现 ,而 不 是 实现 
一 个 完整 的 类 。 
从 测试 的 角度 来 看 ,包含 多 态 具 有 以 下 功能 : 
。 包含 多 态 允 许 系统 通过 增加 类 来 进行 扩展 ,而 非 修改 已 经 存在 的 类 。 扩 展 当 中 可 
能 会 出 现 意外 的 交互 关系 。 
。 包含 多 态 允 许 任何 操作 都 可 以 包括 一 个 或 多 个 类 型 不 确定 的 参数 。 这 就 会 增加 
应 该 测试 的 实际 参数 的 种 类 。 
参数 多 态 是 能 够 根据 一 个 或 者 多 个 参数 来 定义 一 种 类 型 的 能 力 。 从 测试 的 角度 看 ， 
参数 多 态 支 持 不 同类 型 的 继承 关系 。 例 如 ,如 果 模 板 仅仅 用 来 初始 化 单个 实例 ,就 不 能 保 
证 它 与 其 他 类 很 好 地 协作 。 
面向 对 象 的 程序 设计 中 ,针对 继承 和 多 态 特 性 的 测试 是 新 的 测试 技术 难点 。 
在 面向 对 象 语言 中 ,类 是 创建 对 象 的 关键 。 类 描述 了 一 组 对 象 的 公共 特征 和 操作 ,而 
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对 象 则 是 具体 实现 的 类 。 
面向 对 象 技 术 导致 程序 构件 的 复 用 ,而 复 用 导致 更 快 的 软件 开发 和 高 质量 的 程序 。 
面向 对 象 软件 易于 维护 ,因为 它 的 结构 是 内 紧 外 松 , 这 样 当 进行 修改 时 ,影响 面 小 。 此 外 ， 
面向 对 象 系统 易于 进行 适应 性 修改 及 伸缩 。 归 纳 起 来 其 优点 有 : 
。 可 重用 性 。 从 一 开始 对 象 的 产生 就 是 为 了 重复 利用 ,完成 的 对 象 将 在 今后 的 程序 
开发 中 被 部 分 或 全 部 地 重复 利用 。 
。 可 靠 性 。 由 于 面向 对 象 的 应 用 程序 包含 了 通过 测试 的 标准 部 分 ,因此 更 加 可 靠 。 
由 于 大 量 代 码 来 源 于 成 熟 可 靠 的 类 库 ,因而 新 开发 程序 的 新 增 代 码 明显 减少 ,这 
是 程序 可 靠 性 提高 的 一 个 重要 原因 。 
。 连续 性 。 具 有 面向 对 象 特点 的 C++ 与 C 语言 有 很 大 的 兼容 性 ,C 程序 员 可 以 比 
较 容易 地 过 渡 到 C++ 语言 开发 工作 。 


1. 信息 隐藏 对 测试 的 影响 

类 的 重要 作用 之 一 是 信息 隐藏 。 它 对 类 中 所 封装 的 信息 的 存 取 进行 控制 ,从 而 避免 
类 中 有 关 实 现 细节 的 信息 被 错误 地 使 用 。 而 这 样 的 细节 性 信息 正 是 软件 测试 所 不 可 忽略 
的 。 由 于 面向 对 象 的 软件 系统 在 运行 时 由 一 组 协调 工作 的 对 象 组 成 ,对 象 具 有 一 定 的 状 
态 ,所 以 对 面向 对 象 的 程序 测试 来 说 ,对 象 的 状态 是 必须 考虑 的 因素 ,测试 应 涉及 对 象 的 
初 态 .输入 参数 .输出 参数 和 对 象 的 状态 。 对 象 的 行为 是 被 动 的 , 它 只 有 在 接收 有 关 信 
息 后 才 被 激活 来 进行 所 请 求 的 操作 ,并 将 结果 返回 给 发 送 者 。 在 工作 过 程 中 对 象 的 状 
态 可 能 被 修改 ,产生 新 的 状态 ,面向 对 象 软 件 测试 的 基本 工作 就 是 创建 对 象 (包括 初始 
化 ) ,向 对 象 发 送 一 系列 信息 ,然后 检查 结果 对 象 的 状态 ,看 其 是 否 处 于 正确 的 状态 。 
问题 是 对 象 的 状态 往往 是 隐蔽 的 , 若 类 中 未 提供 足够 的 存 取 函数 来 表明 对 象 的 实现 方 
式 和 内 部 状态 , 则 测试 者 必须 增添 这 样 的 函数 。 因 此 ,类 的 信息 隐藏 机 制 给 测试 带 来 
了 困难 。 


2. 封装 和 继承 对 测试 的 影响 

在 面向 对 象 的 程序 中 ,由 于 继承 的 作用 ,一 个 函数 可 能 被 封装 在 多 个 类 中 , 子 类 中 还 
可 以 对 继承 的 特征 进行 重 定义 。 问 题 是 ,未 重 定义 的 继承 特征 是 否 还 需要 进行 测试 呢 ? 
重 定义 的 特征 需要 重新 测试 是 显然 的 ,但 应 该 如 何 测试 重 定义 的 特征 呢 ? 

Weyuker 的 不 可 分 解 性 公理 认为 对 一 个 程序 进行 过 充分 的 测试 后 ,并 不 表示 其 中 的 
成 分 都 得 到 了 充分 的 测试 。 因 此 , 若 一 个 类 得 到 了 充分 的 测试 , 当 其 被 子 类 继承 后 ,继承 
的 方法 在 子 类 的 环境 中 的 行为 特征 需要 重新 测试 。 

Weyuker 的 非 复合 性 公理 认为 一 个 测试 数据 集 对 于 程序 中 的 各 程序 单元 而 言 都 是 
充分 的 并 不 表示 它 对 整个 程序 是 充分 的 。 这 一 公理 表明 , 若 我 们 对 父 类 中 某 一 方法 进行 
了 重 定义 , 仅 对 该 方法 自身 或 其 所 在 的 类 进行 重新 测试 是 不 够 的 ,还 必须 重新 测试 其 他 有 


SN 
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关 的 类 (如 子 类 和 引用 类 )。Perry 和 Kaiser 认为 封装 和 继承 并 未 简化 测试 问题 ,反而 使 
测试 更 加 复杂 。 


3. 多 态 性 对 测试 的 影响 

传统 的 软件 测试 中 经 常 使 用 静态 分 析 技 术 对 代码 进行 分 析 , 识 别 程序 执行 路 径 。 在 
面向 对 象 软件 中 ,由 于 动态 绑 定 和 多 态 性 的 存在 ,使 得 程序 可 执行 的 路 径 急 剧 增加 ,由 于 
多 态 和 动态 绑 定 所 带 来 的 不 确定 性 ,使 得 传统 测试 中 十 分 重要 的 静态 分 析 方法 遇 到 了 很 
大 的 困难 ,这 种 不 确定 性 也 给 测试 覆盖 率 的 满足 带 来 了 挑战 。 


8.3 面向 对 象 测试 与 传统 测试 的 区 别 


传统 的 软件 测试 策略 是 从 * 小 型 测试 ?开始 ,逐步 走向 “大 型 测试 >。 即 从 单元 测试 开 
始 , 然 后 逐步 进入 集成 测试 ,最 后 是 有 效 性 和 系统 测试 。 在 传统 应 用 中 ,单元 测试 集中 在 
最 小 的 可 编译 程序 单位 一 一 子 程序 (如 : 模块 . 子 例 程 、. 进程) ,一 旦 这 些 单元 都 已 经 被 独 
立 测 试 过 后 ,就 被 集成 在 程序 结构 中 ,然后 进行 一 系列 的 回归 测试 以 发 现 模块 的 接口 错误 
和 由 于 新 单元 的 加 入 而 产生 的 副作用 ,最 后 ,把 系统 作为 一 个 整体 进行 测试 以 发 现 需求 规 
格 说 明 中 的 错误 。 

面向 对 象 程序 的 结构 不 再 是 传统 的 功能 模块 结构 ,作为 一 个 整体 , 原 有 集成 测试 所 要 
求 的 逐步 将 开发 的 模块 搭建 在 一 起 进行 测试 的 方法 已 经 不 可 能 。 而 且 , 面 向 对 象 软件 抛 
弃 了 传统 的 开发 模式 ,对 每 个 开发 阶段 都 有 不 同 于 以 往 的 要 求 和 结果 ,已 经 不 可 能 用 功能 
细 化 的 观点 来 检测 面向 对 象 分 析 和 设计 的 结果 。 因 此 ,传统 的 测试 模型 对 面向 对 象 软件 
已 经 不 再 适用 。 

面向 对 象 的 软件 开发 模型 突破 了 传统 的 瀑布 模型 ,将 开发 分 为 面向 对 象 分 析 
(OOA) \ 面 向 对 象 设计 (OOD) 和 面向 对 象 编程 (OOP)3 个 阶段 。 针 对 这 种 开发 模型 , 结 
合 传统 的 测试 步 又 的 划分 ,可 以 把 面向 对 象 的 软件 测试 模型 分 为 : 面向 对 象 分 析 的 测试 
(OOA Test) ` 面 向 对 象 设计 的 测试 (OOD Test) 、 面 向 对 象 编程 的 测试 (OOP Test) 、 面 向 
对 象 的 单元 测试 (OO Unit Test) ` 面 向 对 象 的 集成 测试 (OO Integrate Test) ,面向 对 象 的 
系统 测试 (OO System Test) 。 

面向 对 象 分 析 的 测试 和 面向 对 象 设 计 的 测试 是 对 分 析 结 果 和 设计 结果 的 测试 ,主要 
针对 分 析 、` 设 计 产 生 的 文本 进行 ,是 软件 开发 前 期 的 关键 性 测试 。 面 向 对 象 编程 的 测试 主 
要 针对 编程 风格 和 程序 代码 实现 进行 测试 ,其 主要 的 测试 内 容 在 面向 对 象 的 单元 测试 和 
面向 对 象 的 集成 测试 中 体现 。 

面向 对 象 的 单元 测试 是 对 程序 内 部 具体 单一 的 功能 模块 的 测试 ,如 果 程 序 是 用 C++ 
语言 实现 ,主要 就 是 对 类 成 员 函 数 的 测试 。 面 向 对 象 的 单元 测试 是 进行 面向 对 象 的 集成 
测试 的 基础 。 面 向 对 象 的 集成 测试 主要 对 系统 内 部 的 相互 服务 进行 测试 ,如 成 员 函 数 间 
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的 相互 作用 、 类 间 的 消息 传递 等 。 面 向 对 象 的 集成 测试 不 但 要 基于 面向 对 象 的 单元 测试 ， 
更 要 参见 面向 对 象 设计 的 测试 或 面向 对 象 设计 的 测试 结果 。 

面向 对 象 的 系统 测试 是 基于 面向 对 象 的 集成 测试 的 最 后 阶段 的 测试 ,主要 以 用 户 需 
求 为 测试 标准 ,需要 借鉴 面向 对 象 分 析 的 测试 或 面向 对 象 分 析 的 测试 的 结果 。 

尽管 上 述 各 阶段 的 测试 构成 一 个 相互 作用 的 整体 ,但 其 测试 的 主体 .方向 和 方法 各 有 
不 同 。 


1. 面向 对 象 分 析 的 测试 (OOA Test) 
传统 的 面向 过 程 分 析 是 一 个 功能 分 解 的 过 程 ,把 一 个 系统 看 成 可 以 分 解 的 功能 的 集 
合 。 这 种 传统 的 功能 分 解 分 析 法 的 着 眼 点 在 于 一 个 系统 需要 什么 样 的 信息 处 理 方法 和 过 
程 ,以 过 程 的 抽象 来 对 待 系统 的 需要 。 而 面向 对 象 分 析 (OOA) 是 “把 E-R 图 和 语义 网 络 
模型 , 即 信息 造型 中 的 概念 ,与 面向 对 象 程序 设计 语言 中 的 重要 概念 结合 在 一 起 而 形成 的 
分 析 方 法 ”, 最 后 通常 是 得 到 问题 空间 的 图 表 的 形式 描述 。 
OOA 直接 映射 问题 空间 ,全 面 地 将 问题 空间 中 的 现实 功能 抽象 化 。 将 问题 空间 中 的 
实例 抽象 为 对 象 ,用 对 象 的 结构 反映 问题 空间 的 复杂 实例 和 复杂 关系 ,用 属性 和 操作 表示 
实例 的 特性 和 行为 。 对 一 个 系统 而 言 ,与 传统 分 析 方法 产生 的 结果 相反 ,行为 是 相对 稳定 
的 ,结构 是 相对 不 稳定 的 ,这 更 充分 反映 了 现实 的 特性 。OOA 的 结果 为 后 面 阶段 类 的 选 
定 和 实现 .类 层次 结构 的 组 织 和 实现 提供 平台 。 因 此 ,对 OOA 的 测试 ,应 从 以 下 方面 
考虑 : 
。 对 认定 的 对 象 的 测试 ; 
。 对 认定 的 结构 的 测试 ; 
。 对 认定 的 主题 的 测试 ; 
。 对 定义 的 属性 和 实例 关联 的 测试 ; 
。 对 定义 的 服务 和 消息 关联 的 测试 。 
OOA 中 认定 的 对 象 是 对 问题 空间 中 的 结构 .其 他 系统 .设备 .被 记忆 的 事件 .系统 涉 
及 的 人 员 等 实际 实例 的 抽象 。 对 它 的 测试 可 以 从 如 下 方面 考虑 : 
。 认定 的 对 象 是 否 全 面 ,是 否 问 题 空间 中 所 有 涉及 的 实例 都 反映 在 认定 的 抽象 对 
象 中 。 

。 认定 的 对 象 是 否 具 有 多 个 属性 。 只 有 一 个 属性 的 对 象 通常 应 看 成 其 他 对 象 的 属 
性 ,而 不 是 抽象 为 独立 的 对 象 。 

。 对 认定 为 同一 对 象 的 实例 是 否 有 共同 的 ,区 别 于 其 他 实例 的 共同 属性 。 

。 对 认定 为 同一 对 象 的 实例 是 否 提供 或 需要 相同 的 服务 ,如 果 服 务 随 着 不 同 的 实例 
而 变化 ,认定 的 对 象 就 需要 分 解 或 利用 继承 性 来 分 类 表示 。 

。 如 果 系统 没有 必要 始终 保持 对 象 代表 的 实例 的 信息 ,提供 或 者 得 到 关于 它 的 服 
务 ,认定 的 对 象 也 无 必要 。 
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。 认定 的 对 象 的 名 称 应 该 尽量 准确 、 适 用 。 

属性 是 用 来 描述 对 象 或 结构 所 反映 的 实例 的 特性 。 而 实例 关联 是 反映 实例 集合 间 的 
映射 关系 。 对 属性 和 实例 关联 的 测试 从 如 下 方面 考虑 : 

。 定义 的 属性 是 否 对 相应 的 对 象 和 分 类 结构 的 每 个 现实 实例 都 适用 ; 

。 定义 的 属性 在 现实 世界 是 否 与 这 种 实例 关系 密切 ; 

。 定义 的 属性 在 问题 空间 是 否 与 这 种 实例 关系 密切 ; 

。 定义 的 属性 是 否 能 够 不 依赖 于 其 他 属性 被 独立 理解 ; 

。 定义 的 属性 在 分 类 结构 中 的 位 置 是 否 恰当 ,低层 对 象 的 共有 属性 是 否 在 上 层 对 象 

属性 体现 ; 

。 在 问题 空间 中 每 个 对 象 的 属性 是 否定 义 完整 ; 

。 定义 的 实例 关联 是 否 符合 现实 ; 

。 在 问题 空间 中 实例 关联 是 否定 义 完整 ,特别 需要 注意 一 对 多 和 多 对 多 的 实例 

关联 。 

2. 面向 对 象 设计 的 测试 (OOD Test) 

通常 的 结构 化 的 设计 方法 ,用 的 是 面向 作业 的 设计 方法 , 它 把 系统 分 解 以 后 ,提出 一 
组 作业 ,这 些 作 业 以 过 程 实现 系统 的 基础 构造 ,把 问题 域 的 分 析 转 化 为 求解 域 的 设计 ,分 
析 的 结果 是 设计 阶段 的 输入 。 

而 面向 对 象 设计 (OOD) 方 法 采用 “造型 的 观点 ”, 以 OOA 为 基础 归纳 出 类 ,并 建立 类 
结构 或 进一步 构造 成 类 库 , 实 现 分 析 结 果 对 问题 空间 的 抽象 。 由 此 可 见 ,OOD 是 OOA 
的 进一步 细 化 和 更 高 层 的 抽象 。 所 以 ,OOD 与 OOA 的 界限 通常 是 难以 严格 区 分 的 。 

OOD 确定 类 和 类 结构 不 仅 是 满足 当前 需求 分 析 的 要 求 , 更 重要 的 是 通过 重新 组 合 或 
加 以 适当 的 补充 ,能 方便 实现 功能 的 重用 和 扩 增 , 以 不 断 适 应 用 户 的 要 求 。 因 此 ,对 OOD 
的 测试 ,应 从 如 下 三 方面 考虑 : 

。 对 认定 的 类 的 测试 ; 

。 对 构造 的 类 层次 结构 的 测试 ， 

。 对 类 库 支 持 的 测试 。 

(1) 对 认定 的 类 的 测试 

OOD 认定 的 类 可 以 是 OOA 中 认定 的 对 象 , 也 可 以 是 对 象 所 需要 的 服务 的 抽象 ,对 
象 所 具有 的 属性 的 抽象 。 认 定 的 类 原则 上 应 该 尽量 基础 性 ,这 样 才 便 于 维护 和 重用 。 测 
试 认定 的 类 

。 是 否 涵盖 了 OOA 中 所 有 认定 的 对 象 ; 

。 是 否 能 体现 OOA 中 定义 的 属性 ; 

。 是 否 能 实现 OOA 中 定义 的 服务 ; 

。 是 否 对 应 着 一 个 含义 明确 的 数据 抽象 ; 
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。 是 否 尽 可 能 少 地 依赖 其 他 类 ; 

。 类 中 的 方法 (C++ : 类 的 成 员 函 数 ) 是 否 单 用 途 。 

(2) 对 构造 的 类 层次 结构 的 测试 

为 能 充分 发 挥 面 向 对 象 的 继承 共享 特性 ,OOD 的 类 层次 结构 ,通常 基于 OOA 中 产 
生 的 分 类 结构 的 原则 来 组 织 , 着 重 体现 父 类 和 子 类 间 的 一 般 性 和 特殊 性 。 在 当前 的 问题 
空间 ,对 类 层次 结构 的 主要 要 求 是 能 在 解 空间 构造 实现 全 部 功能 的 结构 框架 。 为 此 ,测试 
如 下 方面 : 

。 类 层次 结构 是 否 涵盖 了 所 有 定义 的 类 ; 

。 是 否 能 体现 OOA 中 所 定义 的 实例 关联 ; 

。 是 否 能 实现 OOA 中 所 定义 的 消息 关联 ; 

。 子 类 是 否 具 有 父 类 没有 的 新 特性 ; 

。 子 类 间 的 共同 特性 是 否 完全 在 父 类 中 得 以 体现 。 

(3) 对 类 库 支持 的 测试 

对 类 库 的 支持 虽然 也 属于 类 层次 结构 的 组 织 问题 ,但 其 强调 的 重点 是 再 次 软件 开发 
的 重用 。 由 于 它 并 不 直接 影响 当前 软件 的 开发 和 功能 实现 ,因此 ,将 其 单独 提出 来 测试 ， 
也 可 作为 对 高 质量 类 层次 结构 的 评估 。 拟 订 测 试点 如 下 : 

。 一 组 子 类 中 关于 某 种 含义 相同 或 基本 相同 的 操作 ,是 否 有 相同 的 接口 (包括 名 字 

和 参数 表 ) 。 
。 类 中 方法 (C++ : 类 的 成 员 函 数 ) 功 能 是 否 较 单纯 ,相应 的 代码 行 是 否 较 少 (参考 
文献 5 中 建议 为 不 超过 30 行 ) 。 

。 类 的 层次 结构 是 否 是 深度 大 ,宽度 小 。 

3. 面向 对 象 编程 的 测试 (OOP Test) 

典型 的 面向 对 象 程序 具有 继承 .封装 和 多 态 的 新 特性 ,这 使 得 传统 的 测试 策略 必须 有 
所 改变 。 封 装 是 对 数据 的 隐藏 ,外 界 只 能 通过 被 提供 的 操作 来 访问 或 修改 数据 ,这 样 降低 
了 数据 被 任意 修改 和 读 写 的 可 能 性 ,降低 了 传统 程序 中 对 数据 非法 操作 的 测试 。 继 承 是 
面向 对 象 程序 的 重要 特点 ,继承 使 得 代码 的 重用 率 提高 ,同时 也 使 错误 传播 的 概率 提高 。 
多 态 使 得 面向 对 象 程序 对 外 呈现 出 强大 的 处 理 能 力 . 但 同时 却 使 得 程序 内 “同一 ”函数 的 
行为 复杂 化 ,测试 时 不 得 不 考虑 不 同类 型 具体 执行 的 代码 和 产生 的 行为 。 

面向 对 象 程序 是 把 功能 的 实现 分 布 在 类 中 。 能 正确 实现 功能 的 类 ,通过 消息 传递 来 
协同 实现 设计 要 求 的 功能 。 因 此 ,在 面向 对 象 编程 (OOP) 阶 段 ,忽略 类 功能 实现 的 细则 ， 
将 测试 的 目光 集中 在 类 功能 的 实现 和 相应 的 面向 对 象 程序 风格 上 ,主要 体现 为 以 下 两 个 
方面 : 

。 数据 成 员 是 否 满足 数据 封装 的 要 求 ; 

。 类 是 否 实现 了 要 求 的 功能 。 


有 
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(1) 数据 成 员 是 否 满足 数据 封装 的 要 求 

数据 封装 是 数据 和 数据 有 关 的 操作 的 集合 。 检 查 数 据 成 员 是 否 满足 数据 封装 的 要 
求 ,基本 原则 是 数据 成 员 是 否 被 外 界 ( 数 据 成 员 所 属 的 类 或 子 类 以 外 的 调用 ) 直 接 调 用 。 
更 直观 地 说 , 当 改 编 数 据 成 员 的 结构 时 ,是 否 影响 了 类 的 对 外 接口 ,是 否 会 导致 相应 外 界 
必须 改动 。 值 得 注意 ,有 时 强制 的 类 型 转换 会 破坏 数据 的 封装 特性 。 例 如 : 


class Hiden 

{private: 

int a=1; 

char * p= "hiden"; } 
class Visible 

{public: 

int b=2; 


char * s= "visible"; } 


Hiden pp; 

Visible * qq= (Visible * ) &pp; 

在 上 面 的 程序 段 中 ,pp 的 数据 成 员 可 以 通过 qq 被 随意 访问 。 

(2) 类 是 否 实现 了 要 求 的 功能 

类 所 实现 的 功能 ,都 是 通过 类 的 成 员 函 数 执行 。 在 测试 类 的 功能 实现 时 ,应 该 首先 保 
证 类 成 员 函 数 的 正确 性 。 单 独 地 看 待 类 的 成 员 函 数 .与 面向 过 程 程序 中 的 函数 或 过 程 没 
有 本 质 的 区 别 , 几 乎 所 有 传统 的 单元 测试 中 所 使 用 的 方法 ,都 可 在 面向 对 象 的 单元 测试 中 
使 用 


类 函数 成 员 的 正确 行为 只 是 类 能 够 实现 要 求 的 功能 的 基础 ,类 成 员 函 数 间 的 作用 和 
类 之 间 的 服务 调用 是 单元 测试 无 法 确定 的 。 因 此 ,需要 进行 面向 对 象 的 集成 测试 。 需 要 
着 重 声明 ,测试 类 的 功能 ,不 能 仅 满 足 于 代码 能 无 错 运行 或 被 测试 类 能 提供 的 功能 无 错 ， 
应 该 以 所 做 的 OOD 结果 为 依据 ,检测 类 提供 的 功能 是 否 满 足 设 计 的 要 求 , 是 否 有 缺陷 。 
必要 时 (如 通过 OOD 结果 仍 不 清楚 明确 的 地 方 ) 还 应 该 参照 OOA 的 结果 ,以 之 为 最 终 
标准 。 


4. 面向 对 象 的 单元 测试 (OO Unit Test) 

传统 的 单元 测试 是 针对 程序 的 函数 .过 程 或 完成 某 一 定 功能 的 程序 块 。 沿 用 单元 测 
试 的 概念 ,实际 测试 类 成 员 函 数 。 一 些 传统 的 测试 方法 在 面向 对 象 的 单元 测试 中 都 可 以 
使 用 。 如 等 价 类 划分 法 .因果 图 法 . 边 值 分 析 法 .逻辑 覆盖 法 、 路 径 分 析 法 ,程序 插 装 法 等 。 
单元 测试 一 般 建 议 由 程序 员 完 成 。 

用 于 单元 级 测试 进行 的 测试 分 析 ( 提 出 相应 的 测试 要 求 ) 和 测试 用 例 ( 选 择 适当 的 输 
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入 ,达到 测试 要 求 ) ,规模 和 难度 等 均 远 小 于 后 面 将 介绍 的 对 整个 系统 的 测试 分 析 和 测试 
用 例 ,而 且 强调 对 语句 应 该 有 100% 的 执行 代码 覆盖 率 。 在 设计 测试 用 例 选择 输入 数据 
时 ,可 以 基于 以 下 两 个 假设 : 

。 如 果 函 数 ( 程 序 ) 对 某 一 类 输入 中 的 一 个 数据 正确 执行 ,对 同类 中 的 其 他 输入 也 能 

正确 执行 。 

。 如 果 函 数 ( 程 序 ) 对 某 一 复杂 度 的 输入 正确 执行 ,对 更 高 复杂 度 的 输入 也 能 正确 执 

行 。 例 如 需要 选择 字符 串 作 为 输入 时 ,基于 本 假设 ,就 无 须 计 较 字 符 串 的 长 度 。 
除非 字符 串 的 长 度 是 要 求 固定 的 ,如 IP 地 址 字符 串 。 

在 面向 对 象 程序 中 ,类 成 员 函 数 通常 都 很 小 ,功能 单一 ,函数 间 调 用 频繁 ,容易 出 现 一 
些 不 宜 发 现 的 错误 。 例 如 : 

“if (一 1 二 三 write (fid, buffer, amount)) error_out(); ”该 语句 没有 全 面 检 查 
write() 的 返回 值 ,断然 假设 只 有 数据 被 完全 写 和 人 和 没有 写 入 两 种 情况 。 当 测试 也 忽略 了 
数据 部 分 写 入 的 情况 ,就 给 程序 遗留 了 隐患 。 

@ 按 程序 的 设计 ,使 用 函数 strrchr() 查 找 最 后 的 匹配 字符 ,但 在 程序 中 误 写 成 了 画 
数 strchr() ,使 程序 功能 实现 时 查找 的 是 第 一 个 匹配 字符 。 

@@ 程序 中 将 “if(strncemp(strl, str2,strlen(str1)))” 误 写成 “if (strncmp(strl, str2 ， 
strlen(str2)))”。 如 果 测 试用 例 中 使 用 的 数据 strl 和 str2 长 度 一 样 ,就 无 法 检测 出 。 

因此 ,在 做 测试 分 析 和 设计 测试 用 例 时 ,应 该 注意 面向 对 象 程序 的 这 个 特点 ,仔细 地 
进行 测试 分 析 和 设计 测试 用 例 ,尤其 是 针对 以 函数 返回 值 作为 条 件 判断 选择 ,字符 串 操作 

面向 对 象 编 程 的 特性 使 得 对 成 员 函 数 的 测试 ,又 不 完全 等 同 于 传统 的 函数 或 过 程 测 
试 。 尤 其 是 继承 特性 和 多 态 特性 ,使 子 类 继承 或 过 载 的 父 类 成 员 函 数 出 现 了 传统 测试 中 
未 遇见 的 问题 。Brian Marick 给 出 了 两 方面 的 考虑 : 

(1) 继承 的 成 员 函 数 是 否 都 不 需要 测试 

对 父 类 中 已 经 测试 过 的 成 员 函 数 , 两 种 情况 需要 在 子 类 中 重新 测试 : 

。 继承 的 成 员 函 数 在 子 类 中 做 了 改动 ; 

。 成 员 函 数 调用 了 改动 过 的 成 员 函 数 的 部 分 。 

例如 ,假设 父 类 Bass 有 两 个 成 员 函 数 : Inherited() 和 Redefined(), 子 类 Derived 只 
对 Redefined() 做 了 改动 。Derived:: Redefined() 显然 需要 重新 测试 。 对 于 Derived : : 
Inherited() ,如 果 它 有 调用 Redefined() 的 语句 (如 : x 一 x/Redefined()) ,就 需要 重新 测 
试 ,反之 ,无 此 必要 。 

(2) 对 父 类 的 测试 是 否 能 照搬 到 子 类 

援 用 上 面 的 假设 ,Base::Redefined() 和 Derived:: Redefined() 已 经 是 不 同 的 成 员 隐 
数 , 它 们 有 不 同 的 服务 说 明和 执行 。 对 此 , 照 理 应 该 对 Derived:: Redefined() 重 新 测试 分 


了 


软件 测试 教程 


析 ,设计 测试 用 例 。 但 由 于 面向 对 象 的 继承 使 得 两 个 函数 相似 , 故 只 需 在 Base:: 
Redefined() 的 测试 要 求 和 测试 用 例 上 添加 对 Derived:: Redfined() 新 的 测试 要 求 和 增补 
相应 的 测试 用 例 。 

例如 : Base::Redefined() 含 有 如 下 语句 


If (value<0) message ("less"); 
else if (value= =0) message ("equal”); 


else message ("more"); 
Derived: :Redfined() 中 定义 为 


If (value 一 0) message ("less"); 

else if (value= =0) message ("It is equal"); 
else 

{message ("more"); 


if (value= =88)message( "luck"); } 


在 原 有 的 测试 上 ,对 Derived: :Redfined() 的 测试 只 需 做 如 下 改动 : 将 value 二 ==0 的 
测试 结果 期 望 改 动 ; 增加 value 王 王 88 的 测试 。 

多 态 有 几 种 不 同 的 形式 ,如 参数 多 态 ,包含 多 态 , 重 载 多 态 。 包 含 多 态 和 重 载 多 态 在 
面向 对 象 语言 中 通常 体现 在 子 类 与 父 类 的 继承 关系 ,对 这 两 种 多 态 的 测试 参见 上 述 对 父 
类 成 员 函 数 继承 和 重 载 的 论述 。 包 含 多 态 虽 然 使 成 员 函 数 的 参数 可 有 多 种 类 型 ,但 通常 
只 是 增加 了 测试 的 繁杂 。 对 具有 包含 多 态 的 成 员 函 数 测试 时 ,只 需要 在 原 有 的 测试 分 析 
和 基础 上 扩大 测试 用 例 中 输入 数据 的 类 型 的 考虑 。 


5. 面向 对 象 的 集成 测试 (OO Integrate Test) 

传统 的 集成 测试 ,是 由 底 向 上 通过 集成 完成 的 功能 模块 进行 测试 ,一 般 可 以 在 部 分 程 
序 编译 完成 的 情况 下 进行 。 而 对 于 面向 对 象 程序 ,相互 调用 的 功能 是 散布 在 程序 的 不 同 
类 中 ,类 通过 消息 相互 作用 申请 和 提供 服务 。 类 的 行为 与 它 的 状态 密切 相关 ,状态 不 仅仅 
是 体现 在 类 数据 成 员 的 值 ,也 许 还 包括 其 他 类 中 的 状态 信息 。 由 此 可 见 , 类 相互 依赖 极其 
紧密 ,根本 无 法 在 编译 不 完全 的 程序 上 对 类 进行 测试 。 所 以 ,面向 对 象 的 集成 测试 通常 需 
要 在 整个 程序 编译 完成 后 进行 。 此 外 ,面向 对 象 程序 具有 动态 特性 ,程序 的 控制 流 往 往 无 
法 确定 ,因此 也 只 能 对 整个 编译 后 的 程序 做 基于 黑 盒子 的 集成 测试 。 

面向 对 象 的 集成 测试 能 够 检测 出 相对 独立 的 单元 测试 无 法 检测 出 的 那些 类 相互 作用 
时 才 会 产生 的 错误 。 基 于 单元 测试 对 成 员 函 数 行为 正确 性 的 保证 ,集成 测试 只 关注 于 系 
统 的 结构 和 内 部 的 相互 作用 。 面 向 对 象 的 集成 测试 可 以 分 成 两 步 进行 : 先进 行 静态 测 
试 ,再 进行 动态 测试 。 

静态 测试 主要 针对 程序 的 结构 进行 ,检测 程序 结构 是 否 符合 设计 要 求 。 现 在 流行 的 
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一 些 测试 软件 都 能 提供 一 种 称 为 "可 逆 性 工程 ?的 功能 , 即 通过 原 程 序 得 到 类 关系 图 和 函 
数 功能 调用 关系 图 ,例如 International Software Automation 公司 的 Panorama-2 for 
Windows 95、Rational 公司 的 Rose C++ Analyzer 等 ,将 “可 道 性 工程 ?得 到 的 结果 与 OOD 的 
结果 相 比较 , 检 测 程序 结构 和 实现 上 是 否 有 缺陷 。 换 句 话说 ,通过 这 种 方法 检测 OOP 是 
否 达 到 了 设计 要 求 。 

动态 测试 设计 测试 用 例 时 ,通常 需要 上 述 的 功能 调用 结构 图 .类 关系 图 或 者 实体 关系 
图 为 参考 ,确定 不 需要 被 重复 测试 的 部 分 ,从 而 优化 测试 用 例 ,减少 测试 工作 量 ,使 得 进行 
的 测试 能 够 达到 一 定 覆 盖 标 准 。 测 试 所 要 达到 的 覆盖 标准 可 以 是 : 达到 类 所 有 的 服务 要 
求 或 服务 提供 的 一 定 覆 盖 率 ; 依据 类 间 传 递 的 消息 ,达到 对 所 有 执行 线程 的 一 定 覆 盖 率 ; 
达到 类 的 所 有 状态 的 一 定 覆 盖 率 等 。 同 时 也 可 以 考虑 使 用 现 有 的 一 些 测试 工具 来 得 到 程 
序 代码 执行 的 覆盖 率 。 

有 具体 设计 测试 用 例 , 可 参考 下 列 步 又 : 

(1) 先 选 定 检测 的 类 ,参考 OOD 分 析 结 果 ,明确 类 的 状态 和 相应 的 行为 ,类 或 成 员 画 
数 间 传递 的 消息 ,输入 或 输出 的 界定 等 。 

(2) 确定 覆盖 标准 。 

(3) 利用 结构 关系 图 确定 待 测 类 的 所 有 关联 。 

(4) 根据 程序 中 类 的 对 象 构 造 测 试用 例 ,确认 使 用 什么 输入 激发 类 的 状态 .使 用 类 的 
服务 和 期 望 产生 什么 行为 等 。 

值得 注意 ,设计 测试 用 例 时 ,不 但 要 设计 确认 类 功能 满足 的 输入 ,还 应 该 有 意识 地 设 
计 一 些 被 禁止 的 例子 ,确认 类 是 否 有 不 合法 的 行为 产生 ,如 发 送 与 类 状态 不 相 适 应 的 消 
息 ,要 求 不 相 适 应 的 服务 等 。 根 据 具 体 情 况 ,动态 的 集成 测试 ,有 时 也 可 以 通过 系统 测试 
完成 。 

6. 面向 对 象 的 系统 测试 (OO System Test) 

通过 单元 测试 和 集成 测试 , 仅 能 保证 软件 开发 的 功能 得 以 实现 。 但 不 能 确认 在 实际 
运行 时 , 它 是 否 满足 用 户 的 需要 ,是 否 大 量 存 在 实际 使 用 条 件 下 会 被 诱发 产生 错误 的 隐 
患 。 为 此 ,对 完成 开发 的 软件 必须 经 过 规范 的 系统 测试 。 换 个 角度 说 ,开发 完成 的 软件 仅 
仅 是 实际 投入 使 用 系统 的 一 个 组 成 部 分 ,需要 测试 它 与 系统 其 他 部 分 配套 运行 的 表现 ,以 
保证 在 系统 各 部 分 协调 工作 的 环境 下 也 能 正常 工作 。 

系统 测试 应 该 尽量 搭建 与 用 户 实际 使 用 环境 相同 的 测试 平台 ,应 该 保证 被 测 系统 的 
完整 性 ,对 临时 没有 的 系统 设备 部 件 ,也 应 有 相应 的 模拟 手段 。 系 统 测试 时 ,应 该 参考 
OOA 分 析 的 结果 ,对 应 描述 的 对 象 、 属 性 和 各 种 服务 ,检测 软件 是 否 能 够 完全 “再 现 ” 问 题 
空间 。 系 统 测 试 不 仅 是 检测 软件 的 整体 行为 表现 ,从 另 一 个 侧面 看 ,也 是 对 软件 开发 设计 
的 再 确认 。 

这 里 说 的 系统 测试 是 对 测试 步骤 的 抽象 描述 。 它 体现 的 具体 测试 内 容 包括 : 
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(1) 功能 测试 

测试 是 否 满足 开发 要 求 ,是 否 能 够 提供 设计 所 描述 的 功能 ,是 否 用 户 的 需求 都 得 到 满 
足 。 功 能 测试 是 系统 测试 最 常用 和 必须 的 测试 ,通常 还 会 以 正式 的 软件 说 明 书 为 测试 
标准 。 

(2) 强度 测试 

测试 系统 的 能 力 最 高 实际 限度 , 即 软件 在 一 些 超 负荷 的 情况 下 ,功能 实现 的 情况 。 如 要 
求 软件 某 一 行为 的 大 量 重复 .输入 大 量 的 数据 或 大 数值 数据 ,对 数据 库 大 量 复杂 的 查询 等 。 

(3) 性 能 测试 

测试 软件 的 运行 性 能 。 这 种 测试 常常 与 强度 测试 结合 进行 ,需要 事先 对 被 测 软件 提 
出 性 能 指标 ,如 传输 连接 的 最 长 时 限 .传输 的 错误 率 . 计 算 的 精度 .记录 的 精度 .响应 的 时 
限 和 恢复 时 限 等 。 

(4) 安全 测试 

验证 安装 在 系统 内 的 保护 机 构 确 实 能 够 对 系统 进行 保护 ,使 之 不 受 各 种 非常 的 干扰 。 
安全 测试 时 需要 设计 一 些 测试 用 例 试图 突破 系统 的 安全 保密 措施 ,检验 系统 是 否 有 安全 
保密 的 漏洞 。 

(5) 恢复 测试 

采用 人 工 的 干扰 使 软件 出 错 , 中 断 使 用 ,检测 系统 的 恢复 能 力 , 特 别 是 通信 系统 。 恢 
复 测 试 时 ,应 该 参考 性 能 测试 的 相关 测试 指标 。 

(6) 可 用 性 测试 

测试 用 户 是 否 能 够 满意 使 用 。 具 体 体现 为 操作 是 否 方便 ,用 户 界 面 是 否 友 好 等 。 

(7) 安装 / 钊 载 测 试 (install/uninstall test) 

系统 测试 需要 对 被 测 的 软件 结合 需求 分 析 做 仔细 的 测试 分 析 ,建立 测试 用 例 。 

7. 面向 对 象 的 覆盖 率 

由 于 传统 的 结构 化 度量 没有 考虑 面向 对 象 的 一 些 特性 ,如 多 态 、 继 承 和 封装 等 ,传统 
的 结构 化 覆盖 必须 被 加 强 ,以 满足 面向 对 象 特性 。 上 下 文 覆 盖 就 是 一 种 针对 面向 对 象 特 
性 而 增强 的 覆盖 。 

上 下 文 覆盖 可 以 应 用 到 面向 对 象 领域 ,处 理 诸如 多 态 .继承 和 封装 的 特性 ,同时 该 方法 
也 可 以 被 扩展 用 于 多 线程 应 用 。 通 过 使 用 这 些 面 向 对 象 的 上 下 文 覆 盖 , 结 合 传统 的 结构 化 
履 盖 的 方法 就 可 以 保证 代码 的 结构 被 完整 地 执行 ,同时 提高 我 们 对 被 测 软件 质 量 的 信心 。 

有 三 个 面向 对 象 上 下 文 覆 盖 的 定义 ,分 别 是 : 

。 继承 上 下 文 覆盖 : 该 覆盖 用 于 度量 在 系统 中 的 多 态 调用 被 测试 的 程度 。 

。 基于 状态 的 上 下 文 覆盖 : 该 覆盖 用 于 改进 对 带 有 状态 依赖 行为 的 类 的 测试 。 

。 已 定义 用 户 上 下 文 覆盖 : 该 度量 允许 上 下 文 覆 盖 的 方法 被 应 用 到 传统 结构 化 履 

盖 率 无 法 使 用 的 地 方 , 如 多 线程 应 用 。 
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8.4 面向 对 象 的 测试 方法 


1. 继承 层次 结构 中 类 的 测试 

继承 是 实现 接口 和 代码 复 用 的 有 效 机 制 , 也 是 面向 对 象 语言 的 一 大 特色 。 那 么 如 何 
对 继承 层次 结构 中 的 类 进行 有 效 的 测试 呢 ? 下 面 以 Java 语言 为 例 来 说 明 这 个 问题 。 

在 Java 中 引入 的 “继承 ”机 制 ,是 面向 对 象 程序 设计 方 
法 中 的 一 种 重要 手段 ,通过 继承 可 以 更 有 效 地 组 织 程序 结 
构 ,明确 类 间 关 系 , 并 充分 利用 已 有 的 类 来 完成 更 复杂 、 深 


Class A 


+operation10) 


入 的 开发 。 根 据 继承 机 制 的 特点 ,不 难 推断 所 有 为 某 个 类 +operation2() 
确定 的 测试 用 例 集合 对 该 类 的 子 类 也 是 有 效 的 。 父 类 中 被 
测试 用 例 所 测试 的 代码 被 子 类 继承 ,只 要 父 类 代码 没有 被 | 


子 类 “覆盖 ”, 那 么 就 不 用 重新 创建 这 些 测 试用 例 。 类 的 创 
建 是 自 上 而 下 的 ,同样 在 构建 测试 类 时 也 应 采用 自 上 而 下 
的 方法 。 如 图 8-1 所 示 显 示 了 类 之 间 的 继承 关系 。 

从 图 8-1 中 可 以 看 出 , Class_A 类 有 两 个 实例 方法 


Class B 


+operation3() 


operation1() 和 operation2() ,Class_B 类 继承 了 Class_A 人 
类 并 且 实 现 了 新 的 实例 方法 operation3() ,Class_C 类 继承 
了 Class_B 类 ,覆盖 了 Class_B 类 的 实例 方法 operation3() Class C 
和 实例 方法 operation2() 。 

根据 图 8-1 中 这 3 个 类 之 间 的 区 别 , 就 可 以 确定 继承 +operation2() 
的 测试 用 例 中 是 否 需要 产生 新 的 子 类 测试 用 例 , 哪 些 测试 TR 


用 例 适用 于 测试 子 类 ,哪些 测试 用 例 在 测试 子 类 中 不 必 执 


行 ,如 表 8-1 所 示 图 8-1 类 之 间 的 继承 关系 
» > 不 。 


表 8-1 子 类 测试 用 例 增补 表 


类 继承 类 类 方法 是 否 改 变 是 否 增加 测试 用 例 
loc Perationst ) 
operation2() 
operationl1() False False 
Class_B Class_A operation2() False False 
operation3() True True 
operationl() False False 
Class_C Class_B operation2() True True 


operation3() True True 
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由 此 ,可 以 得 出 继承 层次 结构 中 类 测试 的 测试 用 例 可 以 采用 如 下 增补 原则 : 

。 如 果子 类 新 增 了 一 个 或 者 多 个 新 的 操作 ,就 需要 增加 相应 的 测试 用 例 。 

。 如 果子 类 定义 的 同名 方法 覆盖 了 父 类 的 方法 ,就 需要 增加 相应 的 测试 用 例 。 

在 具体 构建 类 测试 用 例 时 可 以 采用 如 图 8-2 所 示 的 结构 。 对 于 基 类 则 需要 百分之百 
地 进行 测试 ,底层 的 测试 类 可 以 对 其 父 类 的 测试 方法 回归 。 


Class A Class A_TestCase 
+operation10) 人 人 +testoperation1() 
+operation2() +testoperation2() 

A 


Class B Class_B_TestCase 


+operation3() +testoperation3() 


A 人 
Class C Class_C_TestCase 
+operation2() +testoperation2() 
+operation3() +testoperation3() 


图 8-2 类 测试 用 例 的 构建 


2. 接口 类 测试 

在 Java 语言 中 ,接口 仅仅 描述 方法 的 特征 但 并 不 具体 实现 ,在 语法 上 与 类 有 些 相似 ， 
可 以 定义 若干 个 抽象 方法 和 常量 ,形成 一 个 属性 集合 ,该 属性 集合 通常 代表 了 某 一 组 功能 
的 实现 ,可 以 实现 与 类 类 似 的 多 重 继承 功能 。 在 对 类 进行 测试 时 需要 构建 可 执行 的 类 实 
例 ,而 接口 不 存在 任何 构造 方法 无 法 被 实现 。 那 么 ,应 该 如 何 对 接口 进行 测试 呢 ? 是 否 应 
该 为 接口 单独 定义 一 个 实现 它 并 且 可 实例 化 的 测试 类 呢 ? 由 于 接口 一 定 会 在 某 个 类 中 实 
现 , 所 以 说 这 样 做 是 没有 必要 的 ,可 以 使 用 一 个 实现 接口 的 类 来 做 测试 即 可 。 在 对 接口 类 
进行 测试 时 ,总 体 来 说 应 该 遵循 以 下 原则 : 

。 如 果 接 口 没 有 被 任何 类 实现 就 无 需 进行 测试 。 

。 如 果 已 被 别 的 类 实现 ,那么 就 针对 实现 该 接口 的 类 进行 测试 。 
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如 图 8-3 所 示 是 一 个 接口 测试 类 的 例子 。 从 图 8-3 中 可 以 看 出 ,Interface_A 接口 定 


义 了 公共 a_Method() 和 b_Method() 方 法 ,该 接口 被 具体 类 Class_C 实现 ,测试 类 Class_ 


C_TestCase 同样 实现 了 该 接口 。 那 么 ,Class_C 和 Class_C_TestCase 都 必须 实现 
a_Method() 和 b_Method() 方 法 ,目的 就 是 为 了 强制 测试 人 员 必 须 测 试 所 有 的 接口 方法 ， 
同时 关注 被 测试 类 是 如 何 具体 实现 接口 中 的 方法 的 。 


O 


Interface A 


+a_Method() 
+b_Method() 


+Class C 


+a_Method() 
+b_Method() 
+c_Method() 


3. 抽象 类 测试 


Class C_TestCase 


+Class C_TestCase() 
+a_Method() 
+b_Method() 
+c_Method() 
+newObject() 
+testA_Method() 
+testB_Method() 
+testC_Method() 


图 8-3 Interface 接口 测试 类 图 


由 于 使 用 抽象 类 可 以 提高 开发 和 维护 程序 的 效率 ,因此 可 以 看 到 大 量 的 抽象 类 被 应 
用 。 但 抽象 类 不 能 被 实例 化 ,而 基于 类 的 测试 需要 构建 可 执行 的 类 实例 。 如 果 为 抽象 类 
单独 开发 一 个 具体 子 类 来 进行 测试 ,就 要 额外 花费 一 些 时 间 ,浪费 宝贵 的 人 力 资 源 。 那 
么 ,如 何 测试 抽象 类 呢 ? 如 果 要 构造 抽象 类 的 测试 驱动 程序 ,首先 要 继承 测试 驱动 类 ,并 
且 需 要 同时 继承 被 测试 抽象 类 ,因为 该 类 不 能 被 具体 化 。 但 是 Java 采用 单 继承 机 制 , 因 
此 对 该 抽象 类 的 测试 驱动 程序 就 不 能 同时 继承 两 个 抽象 类 ,这 似乎 使 问题 的 解决 陷入 了 
困境 。 其 实 , 可 以 换个 角度 来 考虑 问题 。 通 常 ,采用 以 下 两 种 方法 来 处 理 抽象 类 的 测试 


问题 。 


(1) 一 般 情 况 下 ,利用 Java 的 内 类 机 制 ,在 抽象 类 的 测试 驱动 程序 内 引入 内 类 ,让 内 
类 实现 对 被 测试 抽象 类 的 继承 ,然后 把 它 作为 引用 体 ,这样 对 内 类 的 测试 就 等 价 于 对 被 测 


试 抽象 类 的 测试 。 举 例如 下 : 


/x 


AbstractExample. java 
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* 创建 日 期 : 

* 创建 人 员 : 

* 修改 日 期 : 

* 修改 人 员 : 

#*/ 

package applet. unedu. tlpe. test; 

public abstract class AbstractExample implements Example{ 


public AbstractExample(){ 


/¥% 

AbstractExampleTester. java 

* 创建 日 期 : 

* 创建 人 员 : 

x 修改 日 期 : 

* 修改 人 员 : 

*/ 

package applet. unedu. tlpe. test; 

public abstract class AbstractExampleTester extends TestCase{ 
static class AbstractExample_Inner extends AbstractExample{ 
public AbstractExample_Inner(){ 

super(argumentname) ; 

} 

} 

public AbstractExampleTester(){ 
super(argumentname); 

} 

public Example newObject(argumentname) { 
return new AbstractExample_Inner(); 

} 


public void testAbstractExample_Inner(){ 
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(2) 如 果 抽 象 类 被 具体 类 继承 ,那么 ,在 创建 该 具体 类 的 测试 驱动 程序 时 要 继承 抽象 
类 的 测试 驱动 程序 ,在 以 后 的 回归 测试 中 ,只 要 执行 最 底层 的 测试 类 ,就 可 以 对 其 父 测试 
类 重新 执行 一 次 测试 ,同时 将 测试 结果 分 别 返 回 。 


4. 重 载 和 覆盖 测试 

履 盖 是 在 子 类 中 重新 定义 了 从 父 类 中 继承 的 同名 方法 ; 重 载 与 覆盖 不 同 , 不 是 子 类 
对 父 类 同名 方法 的 重新 定义 ,而 是 类 对 自身 己 有 的 同名 方法 的 重新 定义 。 那 么 ,对 含有 重 
载 和 和 覆盖 方法 的 类 如 何 进 行 测试 呢 ? 

在 测试 过 程 中 ,可 以 参考 如 下 两 个 原则 : 

(1) 要 对 类 实例 方法 的 所 有 重 载 形式 分 别 进行 测试 。 

(2) 子 类 的 测试 驱动 程序 在 继承 父 类 测试 驱动 程序 的 同时 ,要 对 覆盖 了 父 类 的 同名 
方法 进行 测试 ,而 且 应 该 重新 对 父 类 的 类 实例 方法 的 所 有 重 载 形式 执行 一 次 测试 。 

举例 如 下 : 


package applet. unedu. tlpe. test; 
public class reload{ 

public reload()! 

} 

public int method_a(){ 

return "method_a()"; 

} 

public int method_a(String a){ 

return "method_a(String a)"; 

} 

public int method_a(String a,String b){ 
return "method_a(String a, String b)"; 
} 

public int method_b(){ 

return "method_bO™"; 

} 

| 

return "method_c()"; 

} 

} 


上 面 程序 代码 定义 了 reload 类 ,下 面 程序 代码 定义 了 reload_TestCase 类 ,reload_ 
TestCase 是 reload 类 的 测试 驱动 程序 ,该 类 对 reload 类 中 包含 的 method_a 实例 方法 的 
3 种 重 载 形式 分 别 进行 了 测试 ,代码 如 下 : 
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/* 

reload_TestCase. java 

* 创建 日 期 : 

x 创建 人 员 ; 

x 修改 日 期 : 

* 修 改 人 员 : 

package applet. unedu. tlpe. test; 


public class reload_TestCase extends TestCasel{ 


public reload_TestCase(argument){ 


} 
b 


public void testMethod_a(){…} 
public void testMethod_a_a(){(…} 
public void testMethod_a_ab(){…} 
public void testMethod_b(C){…} 
public void testMethod_c(){…} 


} 


如 果 现 在 有 另外 一 个 类 reload01 继承 了 reload 类 ,并 且 覆 盖 了 reload 类 中 的 同名 方法 
method_b() 和 method_c(), 具 体 代 码 略 。 那 么 首先 让 reload01_TestCase 类 继承 reload_ 
TestCase 类 ,在 reload01_TestCase 类 中 要 重新 覆盖 testMethod_b() 和 testMethod_c() 两 个 方 
法 ; 然后 ,reload01_TestCase 类 在 实现 了 对 reload01 类 测试 的 基础 上 ,也 能 够 重新 对 reload 
类 的 重 载 (method_a() 方 法 的 3 种 重 载 形式 ) 执 行 一 次 测试 ,具体 代码 略 。 

5. 异常 测试 

为 了 能 够 有 效 地 处 理 程 序 运 行 中 的 错误 ,Java 中 引入 了 异常 和 异常 类 , 当 执 行 体 发 
生 不 可 预料 的 结果 时 就 会 启动 这 种 异常 处 理 机 制 。 因 此 .在 构建 测试 用 例 时 ,除了 要 考虑 
怎样 测试 正常 情况 下 的 程序 运行 状态 外 ,还 要 更 好 地 考虑 如 何 测试 在 某 种 特殊 情况 下 程 
序 代码 是 否 返 回 了 指定 的 状态 。 在 测试 要 抛 出 异常 的 方法 时 要 设计 两 类 测试 用 例 , 即 异 
常 测试 用 例 和 正常 测试 用 例 。 


8.5 类 测试 


面向 对 象 程序 的 基本 单位 是 类 。 类 测试 是 由 那些 与 验证 类 的 实现 是 否 和 该 类 的 说 明 
完全 一 致 的 相关 联 活动 组 成 的 。 如 果 类 的 实现 正确 ,那么 类 的 每 一 个 实例 的 行为 也 应 该 
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是 正确 的 。 


1. 类 测试 的 方法 

通过 代码 检查 或 执行 测试 用 例 能 有 效 地 测试 一 个 类 的 代码 。 在 某 些 情况 下 ,用 代码 
检查 代替 基于 执行 的 测试 方法 是 可 行 的 。 但 是 和 基于 执行 的 测试 方法 相 比 , 代 码 检查 有 
两 个 不 利之 处 : 

。 代码 检查 容易 受 人 为 错误 的 影响 。 

。 代码 检查 在 新 产品 开发 时 明显 需要 更 多 的 工作 量 。 

尽管 基于 执行 的 测试 方法 克服 了 这 些 缺 点 ,但 确定 测试 和 开发 测试 驱动 程序 也 需 
要 很 大 的 工作 量 。 在 某 些 情况 下 ,为 某 个 类 构造 一 个 测试 驱动 程序 所 需要 的 工作 量 可 
能 比 开发 这 个 类 所 需要 的 工作 量 还 要 大 。 但 这 种 情况 不 是 面向 对 象 编程 独 有 的 , 当 有 
许多 子 程序 被 上 一 层次 调用 时 ,在 传统 开发 过 程 中 ,也 会 出 现 类 似 的 情况 。 一 旦 确定 
了 一 个 类 的 可 执行 测试 用 例 ,测试 驱 动 程序 创建 一 个 或 多 个 类 的 实例 来 运行 一 个 测试 
用 例 ,我 们 就 必须 执行 测试 驱动 程序 来 运行 每 个 测试 用 例 , 并 给 出 每 个 测试 用 例 运 行 
的 结果 。 


2. 类 测试 的 组 成 部 分 

作为 每 个 类 ,决定 是 将 其 作为 一 个 单元 进行 独立 测试 ,还 是 以 某 种 方式 将 其 作为 系统 
某 个 较 大 部 分 的 一 个 组 件 进行 独立 测试 ,需要 基于 以 下 因素 进行 决策 : 

。 这 个 类 在 系统 中 的 作用 ,尤其 是 与 之 相关 联 的 风险 程度 。 

。 这 个 类 的 复杂 性 (根据 状态 个 数 、 操 作 个 数 以 及 关联 其 他 类 的 程度 等 进行 衡量 )。 

。 开发 这 个 类 测试 驱动 程序 所 需要 的 工作 量 。 

假如 一 个 类 是 某 个 类 库 不 可 缺少 的 部 分 ,尽管 测试 驱动 程序 的 开发 成 本 可 能 很 高 ,对 
它 进行 充分 的 测试 也 是 值得 的 ,因为 它 的 正确 操作 是 最 重要 的 。 在 进行 类 测试 时 ,一 般 要 
考虑 以 下 几 个 方面 : 

。 测试 人 员 。 如 同 传统 的 单元 测试 是 由 开发 人 员 来 执行 ,类 的 测试 通常 也 由 开发 人 

员 来 进行 。 因 为 测试 人 员 对 代码 相当 熟悉 ,开发 人 员 可 以 使 用 测试 驱动 程序 来 调 
试 他 们 编写 的 代码 ,方便 了 基于 执行 的 测试 方法 。 

。 测试 内 容 。 对 一 个 类 进行 测试 以 检查 它 是 否 只 做 了 规定 的 事情 ,确保 一 个 类 的 
代码 能 够 完全 满足 类 说 明 所 描述 的 要 求 。 在 运行 了 各 种 测试 用 例 后 ,如 果 代码 
的 覆盖 率 不 完整 ,这 可 能 意味 着 这 个 类 的 设计 过 于 复杂 ,需要 简化 成 几 个 
子 类 。 
测试 时 间 。 类 测试 可 以 在 开发 过 程 的 不 同位 置 进行 。 在 一 个 递增 的 ,反复 的 开发 
过 程 中 ,一 个 类 的 说 明 /实现 可 能 会 发 生变 化 ,所 以 应 该 在 软件 其 他 部 分 使 用 该 类 
之 前 来 执行 类 的 测试 。 每 当 一 个 类 的 实现 发 生变 化 时 ,就 应 该 执行 回归 测试 。 
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所 以 类 的 测试 要 和 类 的 设计 、 开 发 保持 同步 ,因为 确定 早期 测试 用 例 有 助 于 对 
类 说 明 的 理解 保持 一 致 ,也 有 助 于 获得 独立 代码 检查 的 反馈 。 若 一 个 类 的 开发 
人 员 不 能 设计 出 充分 和 准确 的 测试 用 例 , 其 测试 结果 会 给 人 一 个 错觉 一 一 即 该 
类 通过 了 所 有 测试 。 但 是 当 该 类 被 集成 到 某 个 较 大 的 系统 时 ,将 会 导致 严重 的 
问题 。 

。 测试 过 程 。 类 的 测试 通常 要 借助 测试 驱动 程序 ,这 个 驱动 程序 创建 类 的 实例 ,并 
为 那些 实例 创造 适当 的 环境 以 便 运行 一 个 测试 用 例 。 驱 动 程序 向 测试 用 例 指定 
的 一 个 实例 发 送 一 个 或 多 个 消息 ,然后 根据 参数 、 响 应 值 .实例 发 生 的 变化 来 检查 
那些 消息 产生 的 结果 。 如 果 编 程 语言 (例如 C++ ) 具 有 程序 员 管 理 存 储 分 配 的 机 
制 ,那么 测试 驱动 程序 需要 删除 它 所 创建 的 那些 实例 。 

。 测试 程度 。 可 以 根据 已 经 测试 了 多 少 类 实现 和 多 少 类 说 明 来 衡量 测试 的 充分 性 。 
对 于 类 测试 来 说 ,要 测试 操作 和 状态 转换 的 各 种 组 合 情 况 , 但 有 时 穷 举 法 是 不 可 
能 的 ,此 时 就 应 该 选择 配对 系列 的 组 合 情 况 ,如 果 能 结合 风险 分 析 进 行 选择 ,效果 
就 会 明显 些 。 


3, 构建 测试 用 例 

首先 看 怎样 从 类 说 明 中 确定 测试 用 例 , 然 后 根据 类 实现 引进 的 边界 值 来 扩充 附加 的 
测试 用 例 。 类 说 明 通 常 可 以 用 多 种 方式 进行 描述 ,如 自然 语言 和 状态 图 等 ,假如 要 测试 的 
类 的 说 明 不 存在 ,那么 就 可 通过 “逆向 工程 法 "产生 一 个 说 明 ,并 在 开始 测试 之 前 让 开发 人 
员 对 之 进行 检查 。 

根据 前 置 条 件 和 后 置 条 件 来 构建 测试 用 例 的 总 体 思想 是 : 为 所 有 可 能 出 现 的 组 合 情 
况 确定 测试 用 例 需 求 。 在 这 些 可 能 出 现 的 组 合 情 况 下 ,可 以 满足 前 置 条 件 , 也 能 够 达到 后 
置 条 件 。 接 下 来 创建 测试 用 例 来 表达 这 些 需求 ,根据 这 些 需 求 还 可 以 创建 拥有 特定 输入 
值 (包括 常见 值 和 边界 值 ) 的 测试 用 例 ,并 确定 它们 的 正确 输出 ,最 后 ,还 可 以 增加 测试 用 
例 来 阐述 违反 前 置 条 件 所 发 生 的 情况 。 


4. 类 测试 系列 的 充分 性 

在 某 些 情况 下 ,可 以 使 用 穷 举 法 来 测试 每 个 类 , 即 用 所 有 可 能 的 值 来 测试 ,以 确保 每 
一 个 类 都 符合 它 的 说 明 。 在 这 种 情况 下 , 穷 举 测试 法 所 带 来 的 好 处 就 超过 了 编写 测试 驱 
动 程序 以 运行 更 多 测试 用 例 所 付出 的 代价 。 

但 是 穷 举 测试 法 一 般 是 不 可 能 实现 的 ,如 果 不 能 使 用 穷 举 测试 法 时 ,就 不 能 保证 一 个 
类 的 每 一 方面 都 符合 它 的 说 明 ,但 能 够 运用 某 个 充分 性 的 标准 来 使 我 们 对 测试 系列 的 质 
量 抱 有 高 度 的 信心 。 充 分 性 的 三 个 常用 标准 是 : 基于 状态 的 覆盖 率 、 基 于 约束 的 覆盖 率 、 
基于 代码 的 覆盖 率 。 最 低 限 度 地 符合 这 些 标准 将 会 产生 若干 不 同 的 测试 系列 。 将 所 有 三 
个 标准 用 于 测试 系列 ,将 会 提高 我 们 对 测试 充分 性 的 信任 度 。 
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。 基于 状态 的 覆盖 率 。 以 测试 覆盖 了 多 少 个 状态 转换 为 依据 。 假 如 测试 没有 覆盖 
一 个 或 一 个 以 上 的 状态 转换 ,那么 这 个 类 的 测试 就 不 充分 。 即 使 测试 用 例 对 所 有 
的 状态 都 覆盖 了 一 次 ,测试 的 充分 性 仍 值得 怀疑 ,因为 状态 通常 包含 了 各 种 对 象 
属性 的 值 域 。 这 样 ,必须 测试 这 些 值 域 里 的 所 有 值 , 包 括 典型 值 和 边界 值 。 

。 基于 约束 的 覆盖 率 。 与 基于 状态 转换 的 充分 性 类 似 ,还 可 以 根据 有 多 少 对 前 置 条 
件 和 后 置 条 件 被 覆盖 来 表示 充分 性 。 例 如 ,如 果 一 个 操作 的 前 置 条 件 是 prel 或 
者 pre2 ,而 后 置 条 件 是 postl 或 者 post2 ,充分 的 测试 则 需要 包含 所 有 有 效 的 组 合 
情况 ( 即 prel 王 true,pre2 一 false,postl 王 true,post2 一 false; prel 一 false,pre2 一 
true, post1 二 true,post2 二 false 等 ) 的 测试 用 例 。 假 如 生成 的 测试 用 例 满 足 了 每 
一 个 需求 ,那么 就 符合 这 个 充分 性 的 标准 。 

。 基于 代码 的 覆盖 率 。 当 所 有 的 测试 用 例 都 执行 结束 时 ,确定 实现 一 个 类 的 每 一 行 
代码 ,或 代码 通过 的 每 一 条 路 径 至 少 执行 了 一 次 ,这 是 一 种 很 好 的 思想 。 即 使 代 
码 覆 盖 率 是 100%% ,也 不 一 定 能 满足 基于 状态 覆盖 率 或 基于 约束 的 覆盖 率 是 
100%。 因 为 基于 代码 的 覆盖 率 不 够 充分 ,所 以 使 用 哪些 度量 标准 中 的 某 一 种 来 
确定 充分 性 是 很 重要 的 。 


5. 构建 测试 的 驱动 程序 

测试 驱动 程序 是 一 个 运行 测试 用 例 并 收集 运行 结果 的 程序 。 测 试 驱动 程序 的 设计 应 
该 相对 简单 ,因为 实际 工作 中 很 少 有 时 间 和 资源 来 对 驱动 程序 软件 进行 基于 执行 的 测试 
(否则 会 进入 一 个 程序 测试 的 递归 的 、 无 穷 之 路 ) ,而 是 依赖 代码 检查 来 检测 测试 驱动 程 
序 。 所 以 ,测试 驱动 程序 必须 是 严谨 的 ,结构 清晰 、 简 单 ,易于 维护 ,并 且 对 所 测试 类 的 说 
明 变 化 具有 很 强 的 适应 能 力 。 理 想 情况 下 ,在 创建 新 的 测试 驱动 程序 时 ,应 该 能 够 复 用 已 
存在 的 驱动 程序 代码 。 


6.Tester 类 的 设计 

由 于 Tester 类 提供 了 一 些 操 作 来 帮助 给 出 测试 用 例 的 结果 ,一 个 具体 的 Tester 类 的 
主要 任务 就 是 运行 测试 用 例 和 给 出 结果 。 类 接口 的 主要 组 成 部 分 是 建立 测试 用 例 的 操 
作 、 分 析 测 试用 例 结果 的 操作 、 执 行 测试 用 例 的 操作 和 创建 用 于 运行 测试 用 例 的 输出 实例 
的 操作 。 在 具体 的 Tester 类 中 ,为 每 一 个 测试 用 例 定 义 了 一 个 方法 ,被 称 为 测试 用 例 方 
法 。 这 些 方法 给 测试 计划 提供 了 可 跟踪 性 一 一 每 一 个 测试 用 例 或 每 一 组 紧密 联系 的 测试 
用 例 都 有 一 个 方法 。 测 试用 例 方法 的 目的 是 通过 创建 输入 状态 .生成 事件 序列 并 检查 输 
出 状态 来 执行 测试 用 例 。 

测试 用 例 方 法 的 任务 是 为 某 个 用 例 构 建 输入 状态 。 例 如 ,可 以 通过 将 一 个 输出 和 作 
为 参数 传递 的 对 象 实例 化 ,然后 生成 测试 用 例 指定 的 事件 。 如 图 8-4 所 示 显 示 了 一 个 满 
足 了 这 些 需求 的 Tester 类 的 模型 。 
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Tester 


#enum Result{Fail, TBD, Pass} -| 


#Tester(logFileName: String) 
+ Tester() 


+runAllSuites() 
+runFunctionalSuite() 
+runStructuralSuite() 
+runInteractionSuite() 


+totalTally(): int 
+passTally(): int 
+failTally(): int 

+TBDTallyO: int 


#runBaselineSuite(): Boolean 
#CUTinvariantHolds(): Boolean CC 类 


#logTestCaseStart(testID: String) 
#logTestCaseResult(result: Result) 
#logComment(comment: String) 


图 8-4 ”Tester 类 需求 的 一 个 类 模型 


公共 接口 提供 了 一 些 操作 来 运行 各 种 不 同 的 测试 ,根据 测试 用 例 的 来 源 组 织 测试 系 
列 。 如 果 测 试用 例 是 根据 类 说 明确 定 的 ,那么 就 是 功能 性 测试 用 例 ; 如 果 测 试用 例 是 根 
据 代码 确定 的 ,那么 就 是 结构 性 测试 用 例 ; 如 果 测 试用 例 是 测试 一 个 事件 序列 对 一 个 对 
象 的 操作 (例如 几 对 输入 输出 转换 是 否 正 确 ) ,那么 就 是 交互 性 测试 用 例 。 根 据 测 试用 例 
的 依据 来 确定 这 些 范 畴 是 为 了 便于 测试 的 维护 。 

设计 测试 用 例 的 方法 有 多 种 ,下 面 将 简单 介绍 根据 前 置 和 后 置 条 件 确 定 测试 用 例 的 
方法 。 

根据 操作 的 前 置 和 后 置 条 件 来 确定 测试 用 例 的 总 体 思 想 是 : 为 所 有 可 能 出 现 的 组 合 
情况 确定 测试 用 例 需求 ,然后 创建 测试 用 例 来 表达 这 些 需 求 ,最 后 排除 不 可 能 出 现 的 情 
况 。 在 实际 的 测试 过 程 中 ,可 以 根据 这 些 需 求 确定 特定 的 输入 值 和 输出 值 ,还 可 以 增加 测 
试用 例 来 描述 违反 前 置 条 件 时 的 情况 。 

为 了 便于 从 前 置 条 件 和 后 置 条 件 中 确定 测试 用 例 的 总 体 需 求 ,可 以 使 用 OCL( 对 象 
约束 语言 ) 来 分 析 每 种 逻辑 关系 ,对 使 用 不 同 种 逻辑 关系 表示 的 前 置 条 件 和 后 置 条 件 , 分 
别 列 出 相应 的 测试 用 例 。 表 8-2 和 表 8-3 分 别 列 出 了 因 使 用 各 种 不 同 逻 辑 表达 式 表示 前 
置 条 件 和 后 置 条 件 时 产生 的 测试 用 例 需 求 , 其 中 表 8-2 中 的 粗 体 表 示 的 是 一 些 暗中 使 用 
了 保护 性 设计 而 产生 的 额外 测试 用 例 。 

接 下 来 就 可 以 使 用 前 置 条 件 和 后 置 条 件 的 各 种 组 合 情 况 来 测试 一 个 指定 的 操作 ,使 
用 以 上 两 张 表 来 确定 测试 用 例 需求 的 步骤 如 下 : 
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表 8-2 根据 前 置 条 件 确定 测试 用 例 


逻辑 表达 式 


影响 


(true, post) 


(CO .post) 


(not © ,exception) 


(not Dpost) 


(© and @ .post) 


Dand® 


(CO and ©@ ,post) 


(© and not @ .exception) 


(not | and © ,exception) 


(not | and not ©@ .exception) 


Dor® 


(@ ,post) 


(©@ ,post) 


(CO and @ ,post) 


(not | or not © ,exception) 


©@ xor @ 


(CO and not @ ,post) 


(not © and @ ,post) 


(© and @ .exception) 


(not © and not © ,exception) 


© implies @ 


(not ,post) 


(©@ ,post) 


(not © and @ ,post) 


(© and not © ,exception) 


if © then @ else @ endif 


注 : OO@ ,.@ 代 表 OCL 表示 的 组 件 。 


(© and ©@ ,post) 


(not © and @ ,post) 


(© and not © ,exception) 


(not © and not @ .exception) 


(1) 确定 操作 的 前 置 条 件 与 表 8-2 中 的 哪个 逻辑 表达 式 相 匹配 ,然后 找 出 相对 应 的 


影响 列表 。 


(2) 确定 操作 的 后 置 条 件 与 表 8-3 中 的 哪个 逻辑 表达 式 相 匹配 ,然后 找 出 相对 应 的 


影响 列表 。 


(3) 根据 前 面 得 出 的 影响 列表 确定 各 种 组 合 情 况 构成 测试 用 例 需 求 ,即使 用 第 一 个 
列表 中 的 每 个 输入 约束 条 件 代 替 第 二 个 列表 中 的 每 个 前 置 条 件 。 

(4) 去 掉 生 成 的 所 有 无 意义 的 条 件 。 例 如 : (shape 一 rectangle)or(shape 一 circle) 将 
产生 一 个 测试 用 例 ,在 这 个 测试 用 例 中 ,不 可 能 同时 满足 (shape= rectangle)and(shape 一 


circle) 。 


SS 
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表 8-3 根据 后 置 条 件 确定 测试 用 例 


后 置 条 件 影 响 
(1) (pre.(1)) 
(1)and(2) (pre.(1)and(2)) 
(pre.(1)) 
(1)or(2) (pre.(2)) 
(pre.(1)and(2)) 


(pre,(1)and(2)) 
(prevnot(1)and(2)) 
(1)implies(2) (pre.not(1)or(2)) 
(pre and 六 ,(2)) 
(pre and not 六 ,(3)) 


(1)xor(2) 


if(1)then(2)else(3)endif 


注 : 妆 就 是 使 得 (1) 为 真 的 一 个 条 件 。 


个 别 情况 下 ,有 的 前 置 条 件 和 后 置 条 件 比 表 中 所 列 的 情况 更 为 复杂 ,如 涉及 3 个 转折 
词 ,那么 此 时 就 循环 执行 步骤 (1) 和 步骤 (2)。 但 通常 在 面向 对 象 程序 中 的 前 置 条 件 和 后 
置 条 件 都 很 简单 。 

下 面 是 针对 一 个 类 的 某 个 操作 测试 的 例子 。 


public setID(int ID)1{ 

try{ 

if(conditionA or conditionB) 
ID=bte;s 

} 

catch( SQLException e){ 

e. printStackTrace(); 

. 

} 


使 用 OCL 对 该 操作 的 描述 如 下 : 
setID 所 属 的 类 名 : setID(ID: int) 


pre: conditionA or conditionB 


post: ID 一 b 十 c 


在 这 个 方法 中 ,四 代表 conditionA,@ 代 表 conditionB; (1) 代 表 ID=b 十 c。 

根据 前 面 所 述 的 确定 测试 用 例 需求 的 步骤 .可 以 把 形式 和 形式 的 前 置 条 件 以 及 后 置 
条 件 的 表象 组 合 起 来 就 可 以 确定 如 下 几 个 测试 用 例 : 

考虑 前 置 条 件 对 测试 系列 的 影响 确定 的 测试 用 例如 下 : 
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(@D,(1)) (conditionA .ID 一 b 十 c) 
(加 ,()) CeconditionB,ID 一 b 十 c) 
(CO and 回 ,CD)) (conditionA and conditionB,ID 王 b 十 c) 


(not © or not @ ,exception) (not conditionA and not conditionB,exception) 


那么 在 实际 类 中 ,针对 conditionA 和 conditionB 给 变量 赋值 ,就 可 以 得 到 满足 上 述 
的 测试 用 例 需求 ,设计 具体 的 测试 用 例 ; 同 理 , 当 逻辑 表达 式 为 其 他 情况 时 的 测试 用 例 需 
求 , 也 可 以 按照 类 似 的 方法 来 确定 。 但 要 注意 的 是 : 要 从 所 确定 的 测试 用 例 需求 中 排除 
不 可 能 发 生 的 情况 。 


8.6 _ JUnit 简介 


1. JUnit 概述 

JUnit 是 一 个 对 Java 程序 进行 单元 测试 的 测试 框架 ,是 xUnit 在 Java 语言 上 的 实 
现 。xUnit 是 专门 进行 单元 测试 的 程序 框架 。JUnit 是 SourceForge 上 一 个 开源 软件 , 它 
的 官方 网 站 是 : www.junit. org ,项 目 网 站 是 : http://sourceforge. net/projects/junit/。 

JUnit 有 以 下 特点 : 
提升 程序 代码 的 品质 时 ,JUnit 测试 仍 允许 更 快速 的 编写 程序 。 如 果 采 用 一 个 综 
合 的 测试 系列 ,就 可 以 在 改变 程序 代码 之 后 快速 地 执行 多 个 测试 。 
JUnit 使 用 简单 。 使 用 JUnit 可 以 快速 地 编写 测试 并 检测 程序 代码 ,并 逐步 随 着 
程序 代码 的 增长 增加 测试 。 测 试 是 检查 程序 代码 的 完整 性 。 
JUnit 能 够 检验 测试 结果 并 立即 提供 回馈 。JUnit 测试 可 以 自动 执行 并 且 检 查 结 
果 。 当 执行 测试 时 ,将 获得 简单 且 立 即 的 回馈 ,比如 测试 是 通过 或 失败 ,而 不 青 
需要 人 工 检查 测试 结果 的 报告 。 
JUnit 测试 可 以 合成 一 个 有 层次 的 测试 系列 架构 。JUnit 可 以 把 测试 组 织 成 测试 
系列 ,这 个 测试 系列 可 以 包含 其 他 的 测试 或 测试 系列 。JUnit 测试 的 合成 行为 允 
许 组 合 多 个 测试 并 自动 的 回归 .从头 到 尾 测试 整个 测试 系列 ,也 可 以 执行 测试 系 
列 层级 架构 中 任何 一 层 的 测试 。 
。 开发 测试 成 本 低 。 测 试 是 检验 要 测试 的 程序 代码 并 定义 期 望 的 结果 。JUnit 测试 
框架 提供 自动 执行 测试 的 背景 ,并 使 这 个 背景 成 为 其 他 测试 集合 的 一 部 分 。 花 费 
少量 的 测试 投资 便 能 够 持续 地 获得 回报 。 
JUnit 测试 提升 软件 的 稳定 性 。 对 程序 所 作 的 测试 越 少 ,程序 代码 就 越 不 稳定 。 
JUnit 测试 是 用 Java 开发 的 。 使 用 Java 测试 Java 软件 形成 一 个 介 于 测试 及 程序 
代码 间 的 无 颖 边界 。 在 测试 的 控制 下 测试 变 成 整个 软件 的 扩充 ,同时 程序 代码 可 
以 被 重 整 。 


到 
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2. JUnit 的 安装 

(1) 首先 要 从 网 上 下 载 最 新 的 软件 压缩 包 , 本 书 中 所 有 例子 使 用 的 是 3. 8. 1 版 本 。 

(2) 解压 JUnit 压缩 包 。 将 JUnit. zip 复制 到 工作 目录 (C:\work) 下 ,直接 解压 缩 即 
得 到 C:;\work \Junit3. 8. 1。 这 时 可 以 在 这 个 目录 下 看 到 以 下 内 容 : 

Readme. html: JUnit 说 明文 件 。 

cpl-v10. html: License 文件。 

JUnit. jar: 包含 JUnit 所 有 的 类 库 。 

Src.jar: JUnit 的 源 代码 包 。 

Doc 目录 : JUnit 帮助 文档 的 目录 。 其 中 包含 以 下 两 个 目录 。 

。 JavaDoc 目录 : JUnit 的 API 说 明文 档 目录 ; 

。JUnit 目录 : JUnit 自 带 的 例子 程序 目录 (包含 生产 代码 和 测试 代码 ) 。 

(3) 修改 CLASSPATH( 以 Windows 2000 Server 操作 系统 为 例 )。 做 法 ; 右键 单 击 
“我 的 电脑 ”图 标 , 依 次 选择 “属性 ”一 “高 级 ”>“ 环 境 变 量 ", 在 “系统 变量 ”的 “变量 ”列表 框 
中 选择 CLASSPATH ,然后 选择 “编辑 ”, 在 变量 名 输入 框 中 加 入 JUnit. jar 所 在 Bie a 
在 本 例 中 加 入 C:\work \Junit3. 8. 1\ JUnit. jar, 单 击 “ 确 定 ” 按 钮 即 可 (注意 : 使 用 *; 

和 其 他 变量 值 分 开 )。 
(4) 运 正 程序 。 进 入 到 安装 目录 (C:\work \junit3. 8. 1)。 
。 运行 字符 界面 的 JUnit 工具 : 输入 java junit. textui. TestRunner junit. samples. 
AllTests, 结 果 如 图 8-5 所 示 。 


work\junit3.8.1>java junit.textui.TestRunner junit.sanples.AllIests 


Ok C1i19 tests) 


:work\junit3.8.1> 


图 8-5 JUnit 的 字符 界面 


图 8-5 中 一 个 点 表示 测试 成 功 一 个 单元 测试 (否则 是 E) ,Time 表示 测试 总 共 花 费 的 
时 间 ,OK 说 明 没 有 发 现任 何 错误 ,119 表明 一 共 进 行 了 119 个 单元 测试 。 
。 运行 图 形 界 面 的 JUnit 工具 : 输入 java junit. swingui. TestRunner junit, 
samples. AllTests, 结 果 如 图 8-6 所 示 。 
绿色 进度 条 就 是 著名 的 “Green Bar”, 当 Green Bar 出 现 的 时 候 , 说 明 设 计 的 单元 测 
试 全 部 获得 了 成 功 ,可 以 进行 下 一 步 了 。 
如 果 出 现 如 图 8-5 和 图 8-6 所 示 的 界面 时 ,说 明 已 经 成 功 安装 了 JUnit。 
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Test class namer 
junit samples AlrTests 


Vi Reload classes every run 


Runs: 11%W119 X Emors: 0 


Fimshed3976 Seconds Exit 


图 8-6 JUnit 的 图 形 界面 


3. JUnit 类 概述 

JUnit 有 两 个 包 : junit. framework 和 junit. extensions。junit. framework 是 JUnit 
对 xUnit 框架 的 具体 实现 ,是 整个 测试 框架 的 核心 。Junit. extensions 是 JUnit 测试 框架 
的 扩展 。 这 里 重点 介绍 junit. framework 这 个 包 。 

junit, framework 包含 3 个 接口 : 

。 Protectable: JUnit 框架 抛 出 异常 的 接口 。 

。 Test: JUnit 框架 中 测试 实例 需要 实现 的 接口 。 

。 Testistener: 对 于 JUnit 的 测试 运行 过 程 进行 监听 的 Listener 需要 实现 的 接口 。 

junit, framework 包含 5 个 类 : 

。 Assert: 断言 类 。 这 个 类 包含 一 系列 方法 实现 单元 测试 级 别 的 断言 。 

。 TestCase: 测试 案例 类 。 用 户 可 以 通过 继承 这 个 类 来 设置 各 种 各 样 的 测试 
案例 。 
TestSuit: 测试 案例 套装 类 。 这 个 类 是 TestCase 的 一 个 集合 ,可 以 对 测试 案例 进 
行 组 织 和 管理 。 
。 TestFailer: 测试 失败 类 。 这 个 类 收集 测试 过 程 中 各 种 异常 和 失败 信息 。 
。 TestResult: 测试 结果 类 。 这 个 类 收集 测试 的 结果 信息 。 
junit. framework 包含 2 个 错误 类 : 
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。 AssertionFailedError: 断言 失败 错误 类 。 当 断言 失败 时 , 抛 出 这 个 类 。 
。 ComparisonFailure: 比较 失败 类 。 这 个 类 是 对 AssertionFailedError 的 扩展 。 当 
比较 字符 串 失败 时 , 抛 出 这 个 类 。 

4. 使 用 JUnit 来 测试 一 段 简 单 的 Java 代码 

本 文中 所 有 的 例子 均 使 用 Eclipse 开发 。 

测试 需求 : 编写 一 个 Hello 类 。 

测试 案例 : 是 否 存在 Hello 类 。 

测试 /编码 步骤 ， 

(1) 在 Eclipse 中 创建 一 个 名 为 Hello 的 空白 工程 。 在 Eclipse 中 创建 一 个 名 为 
TestHello 的 JUnit Test Case 类 ,如 图 8-7 所 示 。 

(2) 在 TestHello 类 中 增加 testHello 方 法 ,测试 Hello 类 是 否 存 在 ,如 图 8-8 所 示 。 

(3) 运行 TestHello, 出 现 了 著名 的 Red Bar 一 一 存在 测试 没有 通过 ! 如 图 8-9 所 示 。 

(4) 在 工程 中 添加 空 的 Hello 类 ,如 图 8-10 所 示 。 

(5) 修改 TestHello. testHello() 方 法 ,断言 hello 变量 是 否 可 以 声明 ,如 图 8-11 
所 示 。 

(6) 运行 TestHello, 出 现 了 著名 的 Green Bar 


测试 全 部 通过 ! 如 图 8-12 所 示 。 


EE New JUnit Test Case 


JUnit Test Case 
OD The use of the default package is discouraged. 


Source folder: ~ hello/sre Browse... 


Package 本 (default) Browse... 


Name: Testtello 
Superelass'; Dunit. Eramework TestCase Beowse .. 
Which method stubs would you like to create? 

public static void main(String[] args) 

Fa 

|y setlp 0 

了 tearDowrnO 

厂 gonstructorO 


Class under test: | 


图 8-7 创建 TestHello 类 


第 8 章 面向 对 象 的 软件 测试 


import junit.framework.TestCase; 


Spublic class TestHello extends TestCase { 


了 Protected void setUp() threws Exception { 
super.setUp(); 


} 


protected void tearDoun{) throws Exception { 


super. tearDown(); 
} 


publio void testHello() 
{ 


throw new RuntimeException ("Implement me!"); 


图 8-8 testHello() 方 法 


Package Explorer Jierarchy BT 
Pinished after 0.06 se 让 从 间 | 凶 人 国 
Bb 


BFailures: 0 


三 Failure Trace 
jeve. leng, Buntinelxcenti TD 
at TestHello. testHello . 


at sun reflect. NativellethodAccessorImpl. invok 
at sun. reflect. NativellethodAccessorImpl. invoks 
at sun. reflect. DelegatineNlethodAccessorInpl. in 


mm > 


图 8-9 运行 TestHello, 出 现 Red Bar 


|[ 回 Testhello. java " TestSuite. class 


“public class Hello { 


8-10 ”添加 空 的 Hello 类 
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PE Dello java TestSuite. class 


import junit.framework.TestCase; 
Spublic class TestHello extends TestCase { 
private Hello hello; 


protected void setUp() throws Exception { 
super .setUpl); 


hello = new Hello(); 
和 


protected void tearDown!{) throws Exception { 
super.tearDown(); 
} 


public void testHellol{) 
{ 
//throw new RuntimeException ("Implement me!"); 


图 8-11 断言 hello 变量 


Package Explorer | Hierarchy 因 
nehed eter 0 O61 se 


Runs: 1/1 BErrors: 0 BFailures: 


Failures Eierarchy| 


Failure Trace 


图 | 


图 8-12 TestHello 测试 通过 


小 结 


本 章 在 分 析 面 向 对 象 的 软件 测试 与 传统 的 软件 测试 的 基础 之 上 ,对 面向 对 象 的 软件 
测试 的 基本 概念 进行 了 简单 的 介绍 ; 接 下 来 分 析 了 面向 对 象 的 软件 测试 技术 ,如 : 测试 


第 8 章 面向 对 象 的 软件 测试 


用 例 和 测试 驱动 程序 的 设计 ,测试 抽象 类 和 接口 类 ,测试 重 载 和 覆盖 等 技巧 。 


Oo 和 性 


习 题 


. 简 述 面向 对 象 的 特点 与 其 测试 的 概念 。 

. 面向 对 象 的 软件 测试 与 传统 的 软件 测试 有 什么 区 别 ? 

. 通常 情况 下 ,类 测试 驱动 程序 是 由 测试 人 员 还 是 程序 员 进 行 开发 的 ? 
.如何 对 抽象 类 进行 测试 ? 

.如何 对 接口 类 进行 测试 ? 

. 如 何 测试 重 载 和 覆盖 ? 
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本 章 概述 

Web 网 站 测试 是 面向 因特网 Web 页 面 的 测试 。 众 所 周知 ,因特网 网 页 是 由 文字 、 图 
形 .声音 .视频 和 超级 链接 等 组 成 的 文档 。 网 络 客户 端 用户 通 过 在 浏览 器 中 的 操作 ,搜索 
浏览 所 需要 的 信息 资源 。 

针对 Web 网 站 这 一 特定 类 型 软件 的 测试 ,包含 了 许多 测试 技术 ,如 功能 测试 .压力 / 
负载 测试 .配置 测试 .兼容 性 测试 .安全 性 测试 等 。 黑 盒 测 试 . 白 盒 测试 .静态 测试 和 动态 
测试 都 有 可 能 被 采用 。 


9.1 Web 网 站 的 测试 


随 着 因特网 的 快速 发 展 和 广泛 应 用 , Web 网 站 已 经 应 用 到 政府 机 构 .企业 公司 、 财 经 
证 券 .教育 娱乐 等 各 个 方面 ,对 我 们 的 工作 和 生活 产生 了 深远 的 影响 。 正 因为 Web 能 够 
提供 各 种 信息 的 连接 和 发 布 , 并 且 内 容易 于 被 终端 用 户 存 取 , 使 得 其 非常 流行 .无 所 不 在 。 
现在 ,许多 传统 的 信息 和 数据 库 系 统 正在 被 移植 到 因特网 上 ,复杂 的 分 布 式 应 用 也 正在 
Web 环境 中 出 现 。 

基于 Web 网 站 的 测试 是 一 项 重要 、 复 杂 并 且 富 有 难度 的 工作 。Web 测试 相对 于 非 
Web 测试 来 说 是 更 具 挑 战 性 的 工作 ,用 户 对 Web 页 面 质量 有 很 高 的 期 望 。 基 于 Web 的 
系统 测试 与 传统 的 软件 测试 不 同 , 它 不 但 需要 检查 和 验证 是 否 按照 设计 所 要 求 的 项 目 正 
常 运行 ,而 且 还 要 测试 系统 在 不 同 用 户 的 浏览 器 端的 显示 是 否 合适 。 另 外 ,还 要 从 最 终 用 
户 的 角度 进行 安全 性 和 可 用 性 测试 。 然 而 ,因特网 和 Web 网 站 的 不 可 预见 性 使 测试 基于 
Web 的 系统 变 得 困难 。 因 此 ,迫切 需要 研究 基于 Web 网 站 的 测试 方法 和 技术 。 

针对 Web 的 测试 方法 应 该 尽量 覆盖 Web 网 站 的 各 个 方面 ,测试 技术 方面 在 继承 传 
统 测试 技术 的 基础 上 要 结合 Web 应 用 的 特点 。 

基于 Web 的 系统 测试 与 传统 的 软件 测试 既 有 相同 之 处 ,也 有 不 同 的 地 方 ,对 软件 测 
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试 提 出 了 新 的 挑战 。 基 于 Web 的 系统 测试 不 但 需要 检查 和 验证 是 否 按照 设计 的 要 求 运 

行 , 而 且 还 要 评价 系统 在 不 同 用 户 的 浏览 器 端的 显示 是 否 合适 。 更 需要 从 最 终 用 户 的 角 
度 进行 安全 性 和 可 用 性 测试 。 

通常 Web 网 站 测试 的 内 容 包 含 以 下 方面 : 


功能 测试 ， 
性 能 测试 ; 


安全 性 测试 ; 


可 用 性 / 易 用 性 测试 ; 
配置 和 兼容 性 测试 ; 


数据 库 测 试 ; 


代码 合法 性 测试 ; 


完成 测试 。 


实际 上 Web 网 页 各 种 各 样 ,针对 具体 情况 选用 不 同 的 测试 方法 和 技术 。 例 如 ,如 
图 9-1 所 示 是 一 个 典型 的 Web 网 页 ,具有 各 种 可 测试 特性 。 而 如 图 9-2 所 示 是 一 个 简单 
的 网 站 首页 ,界面 直观 , 仅 由 简单 的 文字 、 图 片 和 链接 组 成 ,测试 起 来 并 不 困难 。 
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图 9-1 一 个 典型 的 Web 网 页 
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图 9-2 一 个 简单 的 Web 网 页 


本 章 将 从 功能 测试 ,性 能 测试 .安全 性 测试 .可 用 性 / 易 用 性 测试 .配置 和 兼容 性 测 
试 数据 库 测试 、 代 码 合法 性 测试 和 完成 测试 几 个 方面 讨论 了 基于 Web 的 系统 测试 
方法 。 


9.2 功能 测试 


功能 测试 是 测试 中 的 重点 ,在 实际 的 测试 工作 中 ,功能 在 每 一 个 系统 中 具有 不 确定 
性 ,而 我 们 不 可 能 采用 穷 举 的 方法 进行 测试 。 测 试 工 作 的 重心 在 于 Web 站 点 的 功能 是 否 
守 合 需求 分 析 的 各 项 要 求 。 

对 于 网 站 的 测试 而 言 , 每 一 个 独立 的 功能 模块 都 需要 设计 相应 的 测试 用 例 进行 测试 。 
功能 测试 的 主要 依据 为 (需求 规格 说 明 书 》 及 《详细 设计 说 明 书 》。 对 于 应 用 程序 模块 则 要 
采用 基本 路 径 测 试 法 的 测试 用 例 进行 测试 。 
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功能 测试 主要 包括 以 下 几 个 方面 的 内 容 : 


。 内 容 测 试 ; 

。 链接 测试 ; 

。 表单 测试 ; 

。 Cookies 测试 ; 

。 设计 语言 测试 。 

9.2.1 页 面 内 容 测试 

内 容 测试 用 来 检测 Web 应 用 系统 提供 信息 的 正确 性 、 准 确 性 和 相关 性 。 

(1) 正确 性 

信息 的 正确 性 是 指 信息 是 真实 可 靠 的 还 是 胡乱 编造 的 。 例 如 ,一 条 虚假 的 新 闻 报 道 
可 能 引起 不 良 的 社会 影响 ,其 至 会 让 公司 陷入 麻烦 之 中 ,也 可 能 引起 法 律 方面 的 问题 。 

(2) 准确 性 

信息 的 准确 性 是 指 网 页 文字 表述 是 否 符合 语法 逻辑 或 者 是 否 有 拼写 错误 。 在 Web 
应 用 系统 开发 的 过 程 中 ,开发 人 员 可 能 不 是 特别 注重 文字 表达 ,有 时 文字 的 改动 只 是 为 了 
页 面 布 局 的 美观 。 可 怕 的 是 ,这 种 现象 恰恰 会 产生 严重 的 误解 。 因 此 测试 人 员 需 要 检查 
页 面 内 容 的 文字 表达 是 否 恰当 。 这 种 测试 通常 使 用 一 些 文字 处 理 软件 来 进行 ,例如 使 用 
Microsoft Word 的 “拼音 与 语法 检查 ”功能 。 但 仅仅 利用 软件 进行 自动 测试 是 不 够 的 ,还 
需要 人 工 测试 文本 内 容 。 

另外 ,测试 人 员 应 该 保证 Web 站 点 看 起 来 更 专业 些 。 过 分 地 使 用 粗 斜体 、 大 号 字体 
和 下 划 线 可 能 会 让 人 感到 不 舒服 ,一 篇 到 处 是 大 字体 的 文章 会 降低 用 户 的 阅读 兴趣 。 

(3) 相关 性 

信息 的 相关 性 是 指 能 和 否 在 当前 页 面 内 可 以 找到 与 当前 浏览 信息 相关 的 信息 列表 或 人 
口 ,也 就 是 一 般 Web 站 点 中 所 谓 的 “相关 文章 列表 ”。 测 试 人 员 需 要 确定 是 否 列 出 了 相关 
内 容 的 站 点 链接 。 如 果 用 户 无 法 点 击 这 些 地 址 ,他 们 可 能 会 觉得 很 迷惑 。 

页 面 文 本 测试 还 应 该 包括 文字 标签 , 它 为 网 页 上 的 图 片 提供 特征 描述 。 如 图 9-3 所 
示 给 出 的 是 网 页 中 一 个 文字 标签 的 例子 。 当 用 户 把 鼠标 移动 到 网 页 的 某 些 图 片 时 ,就 会 
立即 弹出 关于 图 片 的 说 明 性 语言 。 

大 多 数 浏览 器 都 支持 文字 标签 的 显示 ,借助 文字 标签 ,用 户 可 以 很 容易 地 了 解 图 片 的 
语义 信息 。 进 行 页 面 内 容 测试 时 ,如 果 整 个 页 面 充 满 图 片 , 却 没有 任何 文字 标签 说 明 , 那 
么 会 影响 用 户 的 浏览 效果 。 

网 上 店面 是 现在 非常 流行 的 Web 网 站 ,这 里 设 定 一 个 网 上 小 百货 商店 作为 例子 ,并 
为 其 设计 测试 用 例 。 

网 上 商店 有 多 种 商品 类 别 供用 户 选 择 , 用 户 选 中 商品 后 放 入 购物 车 。 当 选 完 商 品 , 应 
用 程序 自动 生成 结账 单 ,用 户 就 可 以 进行 网 上 支付 .购买 商品 了 。 


_ 
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图 9-3 网 页 中 的 文字 标签 


本 章 除 了 数据 库 测试 用 例外 ,其 他 测试 用 例 都 是 以 网 上 商店 为 实例 设计 的 ,在 下 面 的 
各 小 节 中 不 再 重复 说 明 。 
页 面 内 容 测 试用 例如 表 9-1 所 示 。 


表 9-1 页 面 内 容 测 试用 例 示例 


测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 
拥 索 结果 中 列 出 该 基 别 
品 类 别 王 一 不 一 到 
9.1 。 | 搜索 某 种 关 别 的 商品 。 | 搜索 美 别 一 | 的 所 有 商品 致 /不 一 致 
证 鼠标 消 过 每 二 不 当 鼠标 滑 过 每 二 个 对 旬 
2 受 测 对 象 一 有 
对 象 受 测 对 象 一 | 时 ,显示 相应 的 文本 信息 人 


9.2.2 页 面 链接 测试 
链接 是 使 用 户 可 以 从 一 个 页 面 浏览 到 另 一 个 页 面 的 主要 手段 .是 Web 应 用 系统 的 一 
个 主要 特征 , 它 是 在 页 面 之 间 切换 和 指导 用 户 去 一 些 不 知道 地 址 的 页 面 的 主要 手段 。 链 
接 测 试 需要 验证 三 个 方面 的 问题 ， 
。 用 户 单 击 链接 是 否 可 以 顺利 地 打开 所 要 浏览 的 内 容 , 即 链接 是 否 按照 指示 的 那样 
确实 链接 到 了 要 链接 的 页 面 。 
。 所 要 链接 的 页 面 是 否 存 在 。 实 际 上 ,好 多 不 规范 的 小 型 站 点 ,其 内 部 链接 都 是 空 
的 ,这 让 浏览 者 感觉 很 不 好 。 
”保证 Web 应 用 系统 上 没有 孤立 的 页 面 ,所 谓 孤 立 页 面 是 指 没有 链接 指向 该 页 面 ， 
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只 有 知道 正确 的 URL 地 址 才能 访问 。 


超级 链接 对 于 网 站 用 户 而 言 意味 着 能 不 能 流畅 地 使 用 整个 网 站 提供 的 服务 ,因而 链 
接 将 作为 一 个 独立 的 项 目 进行 测试 。 另 外 ,链接 测试 必须 在 集成 测试 阶段 完成 ,也 就 是 
说 ,在 整个 Web 应 用 系统 的 所 有 页 面 开 发 完成 之 后 进行 链接 测试 。 

目前 链接 测试 采用 自动 检测 网 站 链接 的 软件 来 进行 ,已 经 有 许多 自动 测试 工具 可 以 
采用 。 如 Xenu Link Sleuth ,主要 测试 链接 的 正确 性 ,但 是 对 于 动态 生成 的 页 面 的 测试 会 
出 现 一 些 错误 。 

页 面 测试 链接 和 界面 测试 中 的 连接 不 同 ,前 者 注重 功能 ,后 者 更 注重 连接 方式 和 位 
置 。 页 面 测试 链接 更 注重 是 否 有 链接 ,链接 的 页 面 是 否 是 说 明 的 位 置 等 。 
9.2.3 表单 测试 

当 用 户 给 Web 应 用 系统 管理 员 提交 信息 时 ,就 需要 使 用 表单 操作 ,例如 用 户 注册 、 合 
录 、 信 息 提 交 等 。 表 单 测试 主要 是 模拟 表单 提交 过 程 , 检 测 其 准确 性 ,确保 每 一 个 字段 在 
工作 中 正确 。 

表单 测试 主要 考虑 以 下 几 个 方面 的 内 容 : 


表单 提交 应 当 模拟 用 户 提交 ,验证 是 否 完成 功能 ,如 注册 信息 。 当 用 户 通过 表单 
提交 信息 的 时 候 , 都 希望 表单 能 正常 工作 。 如 果 使 用 表单 来 进行 在 线 注册 ,要 确 
保 提 交 按 钮 能 正常 工作 ,注册 完成 后 应 返回 注册 成 功 的 消息 。 

要 测试 提交 操作 的 完整 性 ,以 校 验 提交 给 服务 器 的 信息 的 正确 性 。 例 如 ,个 人 信 
息 表 中 ,用 户 填写 的 出 生日 期 与 职称 是 否 恰当 ,填写 的 所 属 省 份 与 所 在 城市 是 否 
匹配 等 。 如 果 使 用 了 默认 值 ,还 要 检验 默认 值 的 正确 性 。 如 果 表 单 只 能 接受 指定 
的 某 些 值 , 则 也 要 进行 测试 。 例 如 ,只 能 接受 某 些 字符 ,测试 时 可 以 跳 过 这 些 字 
符 , 看 系统 是 否 会 报错 。 

使 用 表单 收集 配送 信息 时 ,应 确保 程序 能 够 正确 处 理 这 些 数 据 。 要 测试 这 些 程 
序 , 需 要 验证 服务 器 能 正确 保存 这 些 数据 ,而 且 后 台 运 行 的 程序 能 正确 解释 和 使 
用 这 些 信息 。 

要 验证 数据 的 正确 性 和 异常 情况 的 处 理 能 力 等 ,注意 是 否 符合 易 用 性 要 求 。 

在 测试 表单 时 ,会 涉及 数据 校 验 问题 。 如 果 根 据 已 定 规则 需要 对 用 户 输入 进行 校 
验 , 需 要 保证 这 些 校 验 功能 正常 工作 。 例 如 ,省 份 的 字段 可 以 用 一 个 有 效 列 表 进 
行 校 验 。 在 这 种 情况 下 ,需要 验证 列表 完整 而 且 程序 正确 调用 了 该 列表 (例如 在 
列表 中 添加 一 个 测试 值 ,确定 系统 能 够 接受 这 个 测试 值 ) 。 


提交 数据 ,处 理 数据 等 如 果 有 固定 的 操作 流程 可 以 考虑 自动 化 测试 工具 的 录制 功能 , 编 
写 可 重复 使 用 的 脚本 代码 ,这 样 就 可 以 在 测试 .回归 测试 时 运行 以 便 减 轻 测试 人 员工 作 量 。 

如 图 9-4 所 示 则 是 一 个 比较 复杂 的 表单 例子 ,用 户 填写 个 人 信息 ,提交 后 可 以 申请 
YAHOO 的 免费 信箱 。 
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图 9-4 表单 示例 
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表单 测试 用 例如 表 9-2 所 示 。 


表 9-2 表单 测试 用 例 示例 


测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 
使 用 Tab 键 从 一 个 字 
9.3 | 段 区 跳 到 下 一 个 字 | 开始 字段 区 = | 字段 按 正确 的 顺序 移动 ”| 一 致 /不 一 到 
段 区 
输入 字段 所 能 接受 的 | 字段 名 一 | 
9.4 字段 区 受 输入 一 致 /不 一 
疗 这 卫生 字段 区 能 够 接受 答 致 /不 一 致 
输入 超出 字段 所 能 接 
字段 名 一 字段 区 拒绝 接受 
9.5 | 受 的 最 大 长 度 的 字 | 子女 FO A 
字符 串 一 字符 
符 串 
在 用 户 正确 填写 其 他 字 
个 可 选 字 
9.6 pen 字段 名 一 段 区 的 前 提 下 ,Web 程序 | 一 致 /不 一 致 
0 | 接受 表单 
表单 页 面 弹出 信息 ,要 求 
在 一 个 必 填 字段 区 中 
9.7 字段 名 = 必须 填写 必 填 字段 | 一 致 /不 一 到 
9 | 这 大 tb 致 /不 一 致 
HY 忆 、 


9.2.4 ”Cookies 测试 

Cookies 通常 用 来 存储 用 户 信息 和 用 户 在 某 个 应 用 系统 的 操作 , 当 一 个 用 户 使 用 
Cookies 访问 了 某 一 个 应 用 系统 时 , Web 服务 器 将 发 送 关于 用 户 的 信息 ,把 该 信息 以 
Cookies 的 形式 存储 在 客户 端 计算 机 上 ,这 可 用 来 创建 动态 和 自 定 义 页 面 或 者 存储 登录 
等 信息 。 关 于 Cookies 的 使 用 可 以 参考 浏览 器 的 帮助 信息 。 如 果 使 用 B/S 结构 Cookies 
中 存放 的 信息 更 多 。 

如 果 Web 应 用 系统 使 用 了 Cookies ,测试 人 员 需 要 对 它们 进行 检测 。 测 试 的 内 容 可 
包括 Cookies 是 否 起 作用 ,是 否 按 预 定 的 时 间 进 行 保存 ,刷新 对 Cookies 有 什么 影响 等 。 
如 果 在 Cookies 中 保存 了 注册 信息 ,请 确认 该 Cookies 能 够 正常 工作 而 且 已 对 这 些 信息 
加 密 。 如 果 使 用 Cookies 来 统计 次 数 ,需要 验证 次 数 累计 正确 。 

Cookies 测试 用 例 示 例如 表 9-3 所 示 。 

表 9-3 ”Cookies 测试 用 例 示例 
测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 


测试 Cookies 打开 和 关 Cookies 在 打开 时 是 否 起 
.8 Web 二 = 
9 闭 状态 eb 网 页 作用 致 /不 一 致 


了 
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9.2.5 设计 语言 测试 

Web 设计 语言 版 本 的 差异 可 以 引起 客户 端 或 服务 器 端的 一 些 严重 问题 ,例如 使 用 哪 
种 版 本 的 HTML 等 。 当 在 分 布 式 环境 中 开发 时 ,开发 人 员 都 不 在 一 起 ,这 个 问题 就 显得 万 
为 重要 。 除 了 HTML 的 版 本 问题 外 ,不 同 的 脚本 语言 ,例如 Java、 JavaScript、ActiveX、 
VBScript 或 Perl 等 也 要 进行 验证 。 


9.2.6 功能 测试 用 例 


功能 测试 用 例如 表 9-4 所 示 。 
表 9-4 功能 测试 用 例 示 例 
测试 用 例 号 操作 描述 数据 期 望 结果 ”| 实际 结果 
工 进入 商品 目录 列表 所 在 的 
页 面 添加 的 商品 一 ee 
9.9 | > 选择 若干 商品 并 将 它们 添 | 购物 车 = es 一 致 /不 一 到 
加 到 购物 车 中 页 面 = 
3。 查 看 购物 车 
| 添加 的 商品 二 
1. 通过 民 不 后 
9.10 Es 和 购物 后 中 列 出 也 | 访 / 害 - 广 
2 搜索 的 关键 词 一 | 有 选择 的 商品 
2. 查看 购物 车 a 
页 面 = 
选择 商品 但 没有 放 到 购物 | 添加 的 商品 二 | 购物 车 中 没有 所 
人 中 过 市 购物 车 = 选中 的 商品 ed 
i 
A 添加 的 商品 二 | 放 到 购物 车 中 的 
9.12 | 购物 车 一 商品 在 结账 单 中 | 一 致 /不 一 致 
2. 不 查看 购物 车 ps 6 
3. 转 到 结账 处 i 
工 选择 一 些 商 品 并 把 它们 放 | 、 购物 车 中 的 商品 
添加 的 商品 一 
到 购物 车 中 晤 | 随时 更 新 以 反映 |。 
全。 | 2 把 其 中 一 件 商 品 从 购物 车 | 训 吕 中 站 品 的 添加 和 | 至 (不致 
中 取 走 取出 
9.3 性 能 测试 
网 站 的 性 能 测试 对 于 网 站 的 运行 非常 重要 .目前 多 数 测试 人 员 都 很 重视 对 于 网 站 的 


性 能 测试 。 
网 站 的 性 能 测试 主要 从 三 个 方面 进行 : 负载 测试 .压力 测试 和 连接 速度 测试 。 
负载 测试 指 的 是 进行 一 些 边界 数据 的 测试 。 压 力 测试 更 像 是 恶意 测试 。 压 力 测试 倾 
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向 应 该 是 致使 整个 系统 崩溃 。 连 接 速度 测试 指 的 是 打开 网 页 的 响应 速度 测试 。 
9.3.1 负载 测试 

性 能 测试 需要 验证 Web 系统 能 否 在 同一 时 间 响 应 大 量 的 用 户 ,在 用 户 传送 大 量 数据 
的 时 候 能 否 响应 ,系统 能 否 长 时 间 运 行 。 可 访问 性 对 用 户 来 说 是 极其 重要 的 。 如 果 用 户 
得 到 “系统 忙 ”的 信息 ,他 们 可 能 放弃 ,并 转向 竞争 对 手 。 这 样 就 需要 进行 负载 测试 。 

负载 测试 是 为 了 测量 Web 系统 在 某 一 负载 级 别 上 的 性 能 ,以 保证 Web 系统 在 需求 
范围 内 能 正常 工作 。 负 载 级 别 可 以 是 某 个 时 刻 同 时 访问 Web 系统 的 用 户 数量 ,也 可 以 是 
在 线 数据 处 理 的 数量 。 

负载 测试 包括 的 问题 有 : Web 应 用 系统 能 允许 多 少 个 用 户 同时 在 线 ; 如 果 超 过 了 这 
个 数量 ,会 出 现 什么 现象 ; Web 应 用 系统 能 否 处 理 大 量 用 户 对 同一 个 页 面 的 请 求 。 

负载 测试 的 作用 是 在 软件 产品 投向 市 场 以 前 ,通过 执行 可 重复 的 负载 测试 ,预先 分 析 
软件 可 以 承受 的 并 发 用 户 的 数量 极限 和 性 能 极限 ,以 便 更 好 地 优化 软件 。 

负载 测试 应 该 安排 在 Web 系统 发 布 以 后 ,在 实际 的 网 络 环境 中 进行 测试 。 因 为 一 个 
企业 的 内 部 员工 ,特别 是 项 目 组 人 员 总 是 有 限 的 ,而 一 个 Web 系统 能 同时 处 理 的 请 求 数 
量 将 远 远 超 出 这 个 限度 ,所 以 ,只 有 放 在 因特网 上 ,接受 负载 测试 ,其 结果 才 是 正确 可 信 的 。 

Web 负载 测试 一 般 使 用 自动 化 工具 来 进行 。 
9.3.2 压力 测试 

系统 检测 不 仅 要 使 用 户 能 够 正常 访问 站 点 ,在 很 多 情况 下 ,可 能 会 有 黑客 试图 通过 发 
送 大 量 数据 包 来 攻击 服务 器 。 出 于 安全 的 原因 ,测试 人 员 应 该 知道 当 系统 过 载 时 ,需要 采 
取 哪 些 措 施 ,而 不 是 简单 地 提升 系统 性 能 。 这 就 需要 进行 压力 测试 。 

进行 压力 测试 是 指 实际 破坏 一 个 Web 应 用 系统 ,测试 系统 的 反映 。 压 力 测试 是 测试 系 
统 的 限制 和 故障 恢复 能 力 , 也 就 是 测试 Web 应 用 系统 会 不 会 崩溃 ,在 什么 情况 下 会 崩溃 。 
黑客 常常 提供 错误 的 数据 负载 .通过 发 送 大 量 数据 包 来 攻击 服务 器 ,直到 Web 应 用 系统 出 
溃 , 接 着 当 系统 重 新 启动 时 获得 存 取 权 。 无 论 是 利用 预先 写 好 的 工具 ,还 是 创建 一 个 完全 
专用 的 压力 系统 ,压力 测试 都 是 用 于 查找 Web 服务 (或 其 他 任何 程序 ) 问 题 的 本 质 方法 。 

压力 测试 的 区 域 包括 表单 .登录 和 其 他 信息 传输 页 面 等 。 

负载 /压力 测试 应 该 关注 的 问题 如 下 。 


1. 瞬间 访问 高 峰 

例如 电视 台 的 Web 站 点 ,如 果 某 个 收视 率 极 高 的 电视 选秀 节目 正在 直播 并 进行 网 上 
投票 ,那么 最 好 使 系统 在 直播 的 这 段 时 间 内 能 够 响应 上 百 万 上 千 万 的 请 求 。 负 载 测 试 工 
具 能 够 模拟 X 个 用 户 同时 访问 测试 站 点 。 


2. 每 个 用 户 传送 大 量 数据 
例如 网 上 购物 过 程 中 ,一 个 终端 用 户 一 次 性 购买 大 量 的 商品 。 或 者 节日 里 ,一 个 客户 网 


_ 


软件 测试 教程 


上 派送 大 量 礼物 给 不 同 的 终端 用 户 等 。 系 统 都 要 有 足够 能 力 处 理 单个 用 户 的 大 量 数据 。 

3. 长 时 间 的 使 用 

Web 站 点 提供 基于 Web 的 E-mail 服务 具有 长 期 性 ,其 对 应 的 测试 就 属于 长 期 性 能 
测试 ,可 能 需要 使 用 自动 测试 工具 来 完成 这 种 类 型 的 测试 ,因为 很 难 通过 手工 完成 这 些 测 
试 。 你 可 以 想象 组 织 100 个 人 同时 点 击 某 个 站 点 。 但 是 同时 组 织 100000 个 人 就 很 不 现 
实 。 通 常 ,测试 工具 在 第 二 次 使 用 的 时 候 , 它 创造 的 效益 ,就 足以 支付 成 本 。 而 且 , 测 试 工 
具 安 装 完成 之 后 ,再 次 使 用 的 时 候 , 只 要 点 击 几 下 。 

负载 /压力 测试 需要 利用 一 些 辅助 工具 对 Web 网 站 进行 模拟 测试 。 例 如 ,模拟 大 的 
客户 访问 量 , 记 录 页 面 执行 效率 ,从 而 检测 整个 系统 的 处 理 能 力 。 目 前 常用 的 负载 /压力 
测试 工具 有 WinRunner、LoadRunner、Webload 等 ,运用 它们 可 进行 自动 化 测试 。 
9.3.3 连接 速度 测试 

连接 速度 测试 是 对 打开 网 页 的 响应 速度 测试 。 

用 户 连接 到 Web 应 用 系统 的 速度 根据 上 网 方式 的 变化 而 变化 ,他 们 或 许 是 电话 拨 
号 ,或 是 宽带 上 网 。 当 下 载 一 个 程序 时 ,用 户 可 以 等 较 长 的 时 间 , 但 如 果 仅 仅 访问 一 个 页 
面 就 不 会 这 样 。 如 果 Web 系统 响应 时 间 太 长 (例如 超过 10 秒 钟 ), 用 户 就 会 没有 耐心 等 
待 而 离开 。 

另外 ,有 些 页 面 有 超时 的 限制 ,如 果 响 应 速度 太 慢 , 用 户 可 能 还 没 来 得 及 浏览 内 容 ,就 
需要 重新 登录 了 。 而 且 ,连接 速度 太 慢 ,还 可 能 引起 数据 丢失 ,使 用 户 得 不 到 真实 的 页 面 。 

连接 速度 测试 用 例如 表 9-5 所 示 。 

表 9-5 连接 速度 测试 用 例 示例 

测试 用 例 号 操作 描述 数 据 期 望 结 果 实际 结果 
1. 提交 一 个 完整 的 购买 表单 
2. 记录 接收 到 购买 确认 的 响 


记录 最 小 .最 大 和 平 


9.14 购买 的 商品 二 | 均 响应 时 间 , 同 时 满 | 一 致 /不 一 致 
Ey 足 系统 的 性 能 要 求 
3. 重复 上 述 操作 5 次 | 
1 查找 一 件 商品 记录 最 不. 最 大 和 和平 
9.15 | 2 记录 查找 的 响应 时 间 查询 一 均 响应 时 间 ,同时 满 | 一 致 /不 一 至 
3. 重复 上 述 操作 5 次 足 系统 的 性 能 要 求 


9.4 安全 性 测试 


随 着 因特网 的 广泛 使 用 ,网 上 交 费 .电子 银行 等 深入 到 了 人 们 的 生活 中 。 所 以 网 络 安 
全 问题 就 日 益 重 要 ,特别 对 于 有 交互 信息 的 网 站 及 进行 电子 商务 活动 的 网 站 尤其 重要 。 
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站 点 涉及 银行 信用 卡 支付 问题 ,用 户 资 料 信息 保密 问题 等 。Web 页 面 随时 会 传输 这 些 重 
要 信息 ,所 以 一 定 要 确保 安全 性 。 一 旦 用 户 信息 被 黑客 捕获 泄露 ,客户 在 进行 交易 时 ,就 
不 会 有 安全 感 , 甚 至 后 果 严 重 。 


1. 目录 设置 

Web 安全 的 第 一 步 就 是 正确 设置 目录 。 目录 安全 是 Web 安全 性 测试 中 不 可 忽略 的 
问题 。 如 果 Web 程序 或 Web 服务 器 的 处 理 不 当 , 通 过 简单 的 URL 替换 和 推测 ,会 将 整 
个 Web 目录 暴露 给 用 户 ,这 样 会 造成 Web 的 安全 性 隐患 。 每 个 目录 下 应 该 有 index. 
html 或 main. html 页 面 ,或 者 严格 设置 Web 服务 器 的 目录 访问 权限 ,这样 就 不 会 显示 该 
目录 下 的 所 有 内 容 , 从 而 提高 安全 性 。 


2. SSL 

很 多 站 点 使 用 SSL(Security Socket Layer) 安 全 协议 进行 传送 。 

SSL 表示 安全 套 接 字 协 议 层 , 是 由 Netscape 首先 发 表 的 网 络 数 据 安全 传输 协议 。 
SSL 是 利用 公开 密 钥 / 私 有 密 钥 的 加 密 技术 ,在 位 于 HTTP 层 和 TCP 层 之 间 , 建 立 用 户 
和 服务 器 之 间 的 加 密 通 信 , 从 而 确保 所 传送 信息 的 安全 性 。 

任何 用 户 都 可 以 获得 公共 密 钥 来 加 密 数据 ,但 解密 数据 必须 通过 对 应 的 私人 密 钥 。 
SSL 是 工作 在 公共 密 钥 和 私人 密 钥 基础 上 的 。 

当 用 户 进入 到 一 个 SSL 站 点 是 因为 浏览 器 出 现 了 和 警告 消息 ,而 且 在 地 址 栏 中 的 
HTTP 变 成 HTTPS。 如 果 开 发 部 门 使 用 了 SSL ,测试 人 员 需 要 确定 是 否 有 相应 的 替代 
页 面 , 适 用 于 3.0 以 下 版 本 的 浏览 器 ,这 些 浏览 器 不 支持 SSL。 当 用 户 进入 或 离开 安全 站 
点 的 时 候 , 请 确认 有 相应 的 提示 信息 。 做 SSL 测试 时 ,需要 确认 是 否 有 连接 时 间 限 制 , 超 
过 限制 时 间 后 会 出 现 什 么 情况 等 。 

3. 登录 

如 图 9-5 所 示 , 很 多 站 点 都 需要 用 户 先 注册 后 登录 使 用 ,从 而 校 验 用 户 名 和 匹配 的 密 
码 , 以 验证 他 们 的 身份 ,阻止 非法 用 户 登录 。 这 样 对 用 户 是 方便 的 ,他 们 不 需要 每 次 都 输 
入 个 人 资料 。 

测试 人 员 需 要 验证 系统 阻止 非法 的 用 户 名 /口令 登录 ,而 能 够 通过 有 效 登 录 。 主 要 的 
测试 内 容 有 : 

。 测试 用 户 名 和 输入 密码 是 否 有 大 小 写 区 别 ; 

。 测试 有 效 和 无 效 的 用 户 名 和 密码 ; 

。 测试 用 户 登 录 是 和 否 有 次 数 限制 ,是否 限制 从 某 些 IP 地 址 登录 ; 

。 假设 允许 登录 失败 的 次 数 为 3 次 ,那么 在 用 户 第 三 次 登录 的 时 候 输入 正确 的 用 户 

名 和 口令 ,测试 是 否 能 通过 验证 ; 

。 测试 口令 选择 是 否 有 规则 限制 ; 


二 
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图 9-5 用 户 登录 设置 


。 测试 哪些 网 页 和 文件 需要 登录 才能 访问 和 下 载 ; 
。 测试 是 否 可 以 不 登录 而 直接 浏览 某 个 页 面 ; 
。 测试 Web 应 用 系统 是 否 有 超时 的 限制 ,也 就 是 说 ,用 户 登录 后 在 一 定时 间 内 ( 例 
如 15 分 钟 ) 没 有 点 击 任何 页 面 ,是 否 需 要 重新 登录 才能 正常 使 用 。 
另外 ,许多 站 点 在 登录 邮箱 时 ,也 会 有 安全 性 提示 。 这 里 以 YAHOO 为 例 ,如 图 9-6 
所 示 是 点 击 YAHOO 的 信箱 图 标 时 弹出 的 对 话 框 ,提示 用 户 网 页 通过 安全 链接 。 这 样 用 
户 就 会 安心 地 登录 邮箱 了 。 


4. 日 志文 件 

为 了 保证 Web 应 用 系统 的 安全 性 ,日 志文 件 是 至 关 重要 的 。 需 要 测试 相关 信息 是 否 
写 进 了 日 志文 件 .是 否 可 追踪 。 

在 后 台 ,要 注意 验证 服务 器 日 志 工 作 是 否 正常 。 对 于 日 志文 件 主要 的 测试 内 容 有 : 

。 日 志 是 否 记 录 所 有 的 事务 处 理 ; 
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。 CPU 的 占有 率 是 否 很 高 ; 

。 是 否 有 例外 的 进程 占用 ; 

。 是 否 记录 失败 的 注册 企图 ; 

。 是 否 记 录 被 次 信用卡 的 使 用 ; 

。 是 否 在 每 次 事务 完成 的 时 候 都 进行 保存 ; 

。 是 否 记 录 IP 地 址 ; 

。 是 否 记 录用 户 名 等 。 

5. 脚本 语言 

脚本 语言 是 常见 的 安全 隐患 。 每 种 语言 的 细节 有 所 不 同 。 有 些 脚本 允许 访问 根 目 
录 , 其 他 脚本 只 允许 访问 邮件 服务 器 。 但 是 有 经 验 的 黑客 可 以 利用 这 些 缺 陷 , 将 服务 器 用 
户 名 和 口令 发 送 给 他 们 自己 ,从 而 攻击 和 使 用 服务 器 系统 。 

测试 人 员 需 要 找 出 站 点 使 用 了 哪些 脚本 语言 ,并 研究 该 语言 的 缺陷 。 

服务 器 端的 脚本 常常 构成 安全 漏洞 ,这 些 漏洞 又 常常 被 黑客 利用 。 所 以 ,还 需要 检验 
没有 经 过 授权 ,就 不 能 在 服务 器 端 放置 和 编辑 脚本 的 问题 。 最 好 的 办 法 是 订阅 一 个 讨论 
站 点 使 用 的 脚本 语言 安全 性 的 新 闻 组 。 

6. 加 密 

当 使 用 了 安全 套 接 字 时 ,还 要 测试 加 密 是 否 正确 ,检查 信息 的 完整 性 。 


9.5 可 用 性 /可 靠 性 测试 


可 用 性 /可 靠 性 方面 一 般 采 用 手工 测试 的 方法 进行 评判 ,可 用 性 测试 的 内 容 包括 导航 
测试 .Web 图 形 测试 和 图 形 用 户 界面 测试 等 ,可 靠 性 测试 的 内 容 较 直观 。 


有 
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9.5.1 导航 测试 

导航 描述 了 用 户 在 一 个 页 面 内 操作 的 方式 ,在 不 同 的 用 户 接口 控制 之 间 , 例 如 按钮 、 
对 话 框 ,列表 和 窗口 等 ,或 在 不 同 的 连接 页 面 之 间 。 

导航 测试 的 主要 测试 目的 是 检测 一 个 Web 应 用 系统 是 否 易于 导航 ,具体 内 容 包 括 : 

。 导航 是 否 直观 ; 

。 Web 系统 的 主要 部 分 是 否 可 通过 主页 存 取 ; 

。 Web 系统 是 否 需 要 站 点 地 图 .搜索 引擎 或 其 他 的 导航 帮助 。 

在 一 个 页 面 上 放 太 多 的 信息 往往 起 到 与 预期 相反 的 效果 。Web 应 用 系统 的 用 户 大 
多 是 趋向 于 目的 驱动 ,很 快 地 扫描 一 个 Web 应 用 系统 ,看 是 否 有 满足 自己 需要 的 信息 ,如 
果 没 有 ,就 会 很 快 地 离开 。 很 少 有 用 户 愿意 花 时 间 去 熟悉 Web 应 用 系统 的 结构 ,因此 ， 
Web 应 用 系统 导航 帮助 要 尽 可 能 地 准确 。 

导航 的 另 一 个 重要 方面 是 Web 应 用 系统 的 页 面 结构 .导航 菜单. 连接 的 风格 是 否 一 
致 。 确 保 用 户 赁 直觉 就 知道 Web 应 用 系统 里 面 是 否 还 有 内 容 , 内 容 在 什么 地 方 。 

Web 应 用 系统 的 层次 一 旦 决定 ,就 要 着 手 测试 用 户 导航 功能 ,应 该 让 最 终 用 户 参 与 
这 种 测试 ,提高 测试 质量 。 

导航 条 测试 用 例如 表 9-6 所 示 。 


表 9-6 导航 条 测试 用 例 示例 


测试 用 例 号 操作 描述 数 据 期 望 结 果 实际 结果 
1. 执行 一 个 搜索 ,至 少 搜 搜索 结果 有 10 个 或 10 个 以 上 的 
索 到 10 项 相关 商品 相关 商品 信息 ; 在 没有 到 达 搜 索 列 _ 致 / 
916 信息 查询 二 | 表 页 面 底部 时 ,前面 的 商品 列表 滚 不 一 到 
2. 以 一 件 商品 为 单位 向 动 出 屏幕 ,后 面 的 商品 不 断 从 屏幕 
下 滚动 下 方 出 现 
1. 执行 一 个 搜索 ,至 少 搜 搜索 结果 有 5 个 或 5 个 以 上 的 相 
本 索 到 5 个 页 面 的 输出 查询 二 关 页 面 ; 在 没有 到 达 搜 索 列 表 的 底 | 一 致 / 
2. 以 页 面 为 单位 向 下 部 时 ,当前 的 屏幕 内 容 向 上 滚动 一 | 不 一 致 
滚动 屏 . 下 一 屏 出 现 


9.5.2 ”Web 图形 测 试 

在 Web 应 用 系统 中 ,适当 的 图 片 和 动画 既 能 起 到 广告 宣传 的 作用 ,又 能 起 到 美化 页 
面 的 功能 。 一 个 Web 应 用 系统 的 图 形 可 以 包括 图 片 .动画 边框、 颜色 .字体 .背景 ,按钮 
等 。 图 形 测试 的 内 容 有 ， 

。 要 确保 图 形 有 明确 的 用 途 , 图 片 或 动画 不 要 胡乱 地 堆 在 一 起 ,以 免 浪 费 传输 时 间 。 
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Web 应 用 系统 的 图 片 尺寸 要 尽量 地 小 ,并 且 要 能 清楚 地 说 明 某 件 事 情 ,一 般 都 链 

接 到 某 个 具体 的 页 面 。 

验证 所 有 页 面 字体 的 风格 是 否 一 致 。 

背景 颜色 应 该 与 字体 颜色 和 前 景 颜色 相 搭 配 。 通 常 来 说 ,使 用 少许 或 尽量 不 使 用 

背景 是 个 不 错 的 选择 。 如 果 想 使 用 背景 ,那么 最 好 使 用 单 色 的 ,和 导航 条 一 起 放 

在 页 面 的 左边 。 另 外 ,图 案 和 图 片 可 能 会 转移 用 户 的 注意 力 。 

。 图 片 的 大 小 和 质量 也 是 一 个 很 重要 的 因素 ,一 般 采 用 JPG 或 GIF 压缩 ,最 好 能 使 
图 片 的 大 小 减 小 到 30KB 以 下 。 

。 验证 文字 回 绕 是 否 正确 。 如 果 说 明文 字 指 向 右边 的 图 片 ,应 该 确保 该 图 片 出 现在 
右边 。 不 要 因为 使 用 图 片 而 使 窗口 和 段落 排列 古怪 或 者 出 现 孤 行 。 

。 根据 图 片 能 否 正常 加 载 , 用 来 检测 网 页 的 输入 性 能 好 坏 。 如 果 网 页 中 有 太 多 图 片 
或 动画 插件 ,就 会 导致 传输 和 显示 的 数据 量 巨大 、 减 慢 网 页 的 输入 速度 ,有 时 会 影 
响 图 片 的 加 载 。 

如 图 9-7 所 示 , 网 页 无 法 载 和 图片 时 ,就 会 在 其 显示 位 置 上 显示 错误 提示 信息 。 

Web 图 形 测试 用 例如 表 9-7 所 示 。 


加 ScienceDirect - Home - Wicrosoft Internet Explorer 
文件 下 ) ”编辑 隐 ) 查看 他) 收藏 和 工具 I) 帮助 0D 
日 四 -四 国 的 月 师 tex 革 加 从 -时 加 -| 


地 址 人 0) http’//wew. sciencedirect, com/| 


refine your research 


和 & i Athensin 

[49 6oto SclenceDirecie Home ou have Guest access to ScienceDirect a 
Find out more. 

Reme 


| Home | Browse | mmsetinos | Alerts | Hep | 
Ouick Search Title, abstract keywords Author 
@ :earchtips Journalbook title Volume Issue Page 


B,436,091 Articles Why Register? 

Browse by ttie Register for Personalization and Alerting Sevices 

二 ls F 个 发 从 | I | 了 | fyou are a registered user and logged in, al ofthe major 
actions you do can be stored on this page. For example, it 

can store the title home pages you have visited recently, 

recent quick searches, and full articles viewed. You can 

easily link backto them with one click. Likewise you can 


[<] Hide Subcategories 


图 9-7 网 页 无 法 载 入 图片 的 提示 信息 


了 


软件 测试 教程 


表 9-7 Web 图 形 测试 用 例 示例 
测试 用 例 号 操作 描述 数 据 期 望 结 果 实际 结果 


2 页 面 一 在 选择 的 浏览 器 中 ,图 形 /图 
9.18 查看 图 形 /图 像 浏览 器 二 像 显 示 正 确 致 /不 一 致 


9.5.3 ”图形 用 户 界面 (GUD 测 试 

现在 一 般 人 都 有 使 用 浏览 器 浏览 网 页 的 经 历 ,界面 对 不 懂 技 术 的 用 户 来 说 非常 重要 ， 
所 以 搞 好 界面 测试 也 很 关键 。 

(1) 整体 界面 测试 

整体 界面 是 指 整个 Web 应 用 系统 的 页 面 结构 设计 ,是 给 用 户 的 一 个 整体 感 。 例 如 ， 
当 用 户 浏 览 Web 应 用 系统 时 是 否 感 到 和 舒适, 是否 赁 直觉 就 知道 要 找 的 信息 在 什么 地 方 ， 
整个 Web 应 用 系统 的 设计 风格 是 否 一 致 等 。 

对 整体 界面 的 测试 过 程 ,其 实 是 一 个 对 最 终 用 户 进 行 调查 的 过 程 。 一 般 Web 应 用 系 
统 采取 在 主页 上 做 一 个 调查 问卷 的 形式 ,来 得 到 最 终 用 户 的 反馈 信息 。 因 此 测试 需要 外 
部 人 员 参 加 ,特别 是 终端 用 户 的 参与 。 

(2) 界面 测试 要 素 

界面 测试 要 素 主要 包括 : 符合 标准 和 规范 ,具有 直观 性 一致 性 .灵活 性、 舒适 性 、 正 
确 性 、 实 用 性 。 

Q@ 直观 性 

直观 性 包含 的 问题 有 : 

用 户 界 面 是 否 洁净 .不 奇怪 ,不 拥挤 ,界面 不 应 该 为 用 户 制造 障碍 。 所 需 功能 或 者 期 
待 的 响应 应 该 明显 ,并 在 预期 出 现 的 地 方 。 

。 界面 组 织 和 布局 是 否 合理 ? 

。 是 否 允 许 用 户 轻松 地 从 一 个 功能 转 到 另 一 个 功能 ? 

。 下 一 步 做 什么 是 否 明 显 ? 

。 任何 时 刻 都 可 以 决定 放弃 或 者 退回 、 退 出 吗 ? 
输入 得 到 承认 了 吗 ? 
。 菜单 或 者 窗口 是 否 深 藏 不 露 ? 
。 有 多 余 功 能 吗 ? 
。 软件 整体 抑或 局 部 是 否 做 得 太 多 ? 
。 是 否 有 太 多 特性 把 工作 复杂 化 了 ? 
。 是 否 感到 信息 太 庞杂 ? 
。 如 果 其 他 所 有 努力 失败 ,帮助 系统 能 否 帮 忙 ? 
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Q 一 致 性 
一 致 性 包含 的 问题 有 : 
。 快速 键 和 菜单 选项 : 在 Windows 中 按 Fl 键 总 是 得 到 帮助 信息 ? 
。 术语 和 命令 : 整个 软件 使 用 同样 的 术语 吗 ? 特性 命名 一 致 吗 ? 
。 软件 是 否 一 直面 向 同一 级 别 用 户 ? 
。 按钮 位 置 和 等 价 的 按键 : 大 家 是 否 注意 到 对 话 框 有 OK 按钮 和 Cancle 按钮 时 ， 
OK 按钮 总 是 在 上 方 或 者 左 方 ,而 Cancle 按钮 总 是 在 下 方 或 右 方 。 同 样 原因 ， 
Cancle 按钮 的 等 价 按键 通常 是 Esc 键 ,而 选中 按钮 的 等 价 按钮 通常 是 与 Enter 键 
保持 一 致 。 
@ 灵活 性 
灵活 性 包含 的 问题 有 : 
。 状态 跳 转 : 灵活 的 软件 实现 同一 任务 有 多 种 选择 方式 。 
。 状态 终止 和 跳 过 ,具有 容错 处 理 能 力 。 
。 数据 输入 和 输出 : 用 户 希 望 有 多 种 方法 输入 数据 和 查看 结果 。 例 如 ,在 写字 板 插 
入 文字 可 用 键盘 输入 、 粘 贴 。 
@ 舒适 性 
舒适 性 包含 的 问题 有 : 
。 人 恰当 : 软件 外 观 和 感觉 应 该 与 所 做 的 工作 和 使 用 者 相符 。 
。 错误 处 理 : 程序 应 该 在 用 户 执行 严重 错误 的 操作 之 前 提出 警告 ,并 允许 用 户 恢复 
由 于 错误 操作 导致 丢失 的 数据 。 如 大 家 认为 undo/redo 是 当然 的 。 
。 性 能 : 速度 快 不 见得 是 好 事 。 要 让 用 户 看 清 程 序 在 做 什么 。 
(3) 界面 测试 内 容 
用 户 界 面 测试 主要 包括 以 下 几 个 方面 的 内 容 : 
QO 站 点 地 图 和 导航 条 
测试 站 点 地 图 和 导航 条 位 置 是 否 合理 .是 否 可 以 导航 等 。 内 容 布局 是 否 合理 ,滚动 条 
等 简介 说 明 。 
确认 测试 的 站 点 是 否 有 地 图 。 有 些 网 络 高 手 可 以 直接 去 自己 要 去 的 地 方 ,而 不 必 打 
开 许 多 页 面 。 另 外 新 用 户 在 网 站 中 可 能 会 迷失 方向 。 站 点 地 图 和 /或 导航 条 可 以 引导 用 
户 进 行 浏览 。 需 要 验证 站 点 地 图 是 否 正确 。 确 认 地 图 上 的 链接 是 否 确实 存在 。 地 图 是 否 
包括 站 点 上 的 所 有 链接 。 
@ 使 用 说 明 
说 明文 字 是 否 合理 ,位 置 是 否 正 确 。 
应 该 确认 站 点 是 否 有 使 用 说 明 。 一 般 要 确保 站 点 具有 使 用 说 明 , 因 为 即使 网 站 很 简 
单 ,也 可 能 有 用 户 在 某 些 方面 需要 证 实 一 下 。 测 试 人 员 需 要 测试 说 明文 档 , 验 证 说 明 是 正 
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确 的 。 还 可 以 根据 说 明 进 行 操作 ,确认 出 现 预期 的 结果 。 
@ 背景 /颜色 
背景 /颜色 是 否 正 确 、 美 观 ,是 否 符合 用 户 需求 。 
由 于 Web 日 益 流 行 ,很 多 人 把 它 看 作 图 形 设计 作品 。 不 幸 的 是 ,有 些 开 发 人 员 对 新 
的 背景 颜色 更 感 兴趣 ,以 至 于 忽略 了 这 种 背景 颜色 是 否 易于 浏览 。 例 如 在 紫色 图 片 的 背 
景 上 显示 黄色 的 文本 。 这 种 页 面 显得 “非常 高 贵 ”, 但 是 看 起 来 很 费劲 。 通 常 来 说 ,使 用 少 
许 或 尽量 不 使 用 背景 是 个 不 错 的 选择 。 如 果 想 用 背景 ,那么 最 好 使 用 单 色 的 ,和 导航 条 一 
起 放 在 页 面 的 左边 。 另 外 ,图 案 和 图 片 可 能 会 转移 用 户 的 注意 力 。 
@ 图 片 
无 论 作为 屏幕 的 聚焦 点 或 作为 指引 的 小 图 标 ,一 张 图 片 都 胜 过 千言 万 语 。 有 时 ,告诉 
用 户 一 个 东西 的 最 好 办 法 就 是 将 它 展 示 给 用 户 。 但 是 ,带宽 对 客户 端 或 服务 器 来 说 都 是 
非常 宝贵 的 ,所 以 要 注意 节约 使 用 内 存 。 
相关 测试 内 容 包 括 : 
。 保证 图 片 有 明确 用 途 : 是 否 所 有 的 图 片 对 所 在 的 页 面 都 是 有 价值 的 ,或 者 它们 只 
是 浪费 带宽 ; 
。 图 片 的 大 小 和 质量 : 图 片 是 否 使 用 了 * .GIF、x*.JPG 的 文件 格式 。 是 否 能 使 图 
片 的 大 小 减 小 到 30KB 以 下 ; 
。 所 有 图 片 能 否 正确 载 人 和 显示 : 通常 ,不 要 将 大 图 片 放 在 首页 上 ,因为 这 样 可 能 
会 使 用 户 放 弃 下 载 首页 。 如 果 用 户 可 以 很 快 看 到 首页 ,他 可 能 会 浏览 站 点 ,否则 
可 能 放弃 ; 
。 背景 颜色 是 否 和 字体 颜色 以 及 前 景 颜色 搭配 。 
@ 表格 
表格 测试 的 相关 内 容 : 
。 需要 验证 表格 是 否 设置 正确 ? 
。 用 户 是 否 需要 向 右 滚 动 页 面 才能 看 见 产 品 的 价格 ? 
。 把 价格 放 在 左边 ,而 把 产品 细节 放 在 右边 是 否 更 有 效 ? 
。 每 一 栏 的 宽度 是 否 足 够 宽 , 表 格 里 的 文字 是 否 都 有 折 行 ? 
。 是 否 有 因为 某 一 格 的 内 容 太 多 ,而 将 整 行 的 内 容 拉 长 ? 
表格 测试 用 例 示例 如 表 9-8 所 示 。 
@ 回 绕 
需要 验证 的 是 文字 回 绕 是 否 正 确 。 如 果 说 明文 字 指 向 右边 的 图 片 ,应 该 确保 图 片 出 
现在 右边 。 不 要 因为 使 用 图 片 而 使 窗口 和 段落 排列 古怪 或 者 出 现 孤 行 。 
另外 ,测试 内 容 还 包括 测试 页 面 在 窗口 中 的 显示 是 否 正确 .美观 (在 调整 浏览 器 窗口 
大 小 时 ,屏幕 刷新 是 否 正确 )。 表 单 样式 、 大 小 和 格式 是 否 对 提交 数据 进行 验证 (如 果 在 页 
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面部 分 进行 验证 等。 链接 的 形式 .位 置 是 否 易于 理解 等 。 
表 9-8 表格 测试 用 例 示例 


测试 用 例 号 操作 描述 数 据 期 望 结 果 实际 结果 
i 表格 一 在 选择 的 浏览 器 中 ,表格 显示 
9.19 查看 表格 浏览 器 二 正确 致 /不 一 致 


9.5.4 可 靠 性 测试 
可 靠 性 测试 很 容易 理解 ,如 表 9-9 所 示 ,直接 给 出 可 靠 性 测试 示例 。 


表 9-9 可 靠 性 测试 用 例 示 例 


测试 用 例 号 操作 描 述 数 据 期 望 结 果 实际 结果 
商品 能 够 成 功 购买 ,选择 的 页 
9. 20 dae Ss 商品 一 面 也 能 打印 成 功 ,系统 速度 正 | 一 致 /不 一 致 
品 1= 
品 2 一 
动 测试 工具 ， 品 3 一 
a Se 速度 正常 ,性 能 稳定 
DBP pp 5 一 
商品 "一 
用 户 1= 
5 个 用 户 一 起 登录 网 用 户 2= 5 个 用 户 都 能 在 同一 时 间 将 相 
9. 22 站 ,并 同时 购买 同一 用 户 3= 同 的 商品 放 在 各 自 的 购物 | 一 致 /不 一 臻 
个 商品 用 户 4 一 车 中 
用 户 5 一 


9.6 配置 和 兼容 性 测试 


需要 验证 应 用 程序 可 以 在 用 户 使 用 的 机 器 上 运行 。 如 果 用 户 是 全 球 范围 的 ,需要 
测试 各 种 操作 系统 、 浏 览 器 、 视 频 设 置 和 Modem 的 速度 。 最 后 ,还 要 尝试 各 种 设置 的 
组 合 。 

1. 平台 测试 

市 场 上 有 很 多 不 同 的 操作 系统 类 型 ,最 常见 的 有 Windows、UNIX、Linux 等 。Web 
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应 用 系统 的 最 终 用 户 究竟 使 用 哪 一 种 操作 系统 ,取决 于 用 户 系统 的 配置 。 这 样 ,就 可 能 会 
发 生 兼 容 性 问题 ,同一 个 应 用 可 能 在 某 些 操作 系统 下 能 正常 运行 ,但 在 另外 的 操作 系统 下 
可 能 会 运行 失败 。 

因此 ,在 Web 系统 发 布 之 前 ,需要 在 各 种 操作 系统 下 对 Web 系统 进行 兼容 性 测试 。 


2. 浏览 器 测试 

浏览 器 是 Web 客户 端 核心 的 构件 ,需要 测试 站 点 能 否 使 用 Netscape、Internet 
Explorer 或 Lynx 进行 浏览 。 来 自 不 同 厂 商 的 浏览 器 对 Java、JavaScript、ActiveX 或 不 
同 的 HTML 规格 有 不 同 的 支持 。 并 且 有 些 HTML 命令 或 脚本 只 能 在 某 些 特定 的 浏览 
器 上 运行 。 

例如 ,ActiveX 是 Microsoft 的 产品 ,是 为 Internet Explorer 而 设计 的 ,JavaScript 是 
Netscape 的 产品 ,Java 是 Sun 的 产品 等 。 另 外 ,框架 和 层次 结构 风格 在 不 同 的 浏览 器 中 
也 有 不 同 的 显示 ,其 至 根本 不 显示 。 不 同 的 浏览 器 对 安全 性 和 Java 的 设置 也 不 
一 样 。 

测试 浏览 器 兼容 性 的 一 个 方法 是 创建 一 个 兼容 性 矩阵 。 在 这 个 矩阵 中 ,测试 不 同 厂 
商 、 不 同 版 本 的 浏览 器 对 某 些 构件 和 设置 的 适应 性 。 

大 多 数 Web 浏览 器 允许 大 量 自 定义 。 如 图 9-8 所 示 ,可 以 在 选择 安全 性 选项 .选择 
文字 标签 的 处 理 方式 、 选 择 是 否 启用 插件 等 。 不 同 的 选择 项 对 于 网 站 的 运行 有 各 自 不 同 
的 影响 ,因此 测试 时 每 个 选项 都 要 考虑 。 


常规 | 安全 | 隐私 | 内 容 | 连接 | 程序 | 高 级 


目 
回 | es a JIT 编译 器 (需要 重启 动 ) 
口 启用 Javs 记录 
口 启用 Javs 控制 台 (需要 重启 动 ) 


回 对 无 效 站 点 证 书 发 出 要 省 

口 关闭 浏览 器 时 清空 Internet 临时 文件 来 
回 检查 发 行商 的 证 书 吊销 

口 检查 服务 器 证 书 吊销 (需要 重启 动 ) 


同 所 zh 可 办 立 性 有理 贸 | 
3 > 


还 原 默 认 设置 EE) 


图 9-8 ”Internet Explorer 浏览 器 的 可 配置 性 
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浏览 器 环境 和 测试 平台 的 兼容 性 如 表 9-10 所 示 。 在 不 同 的 平台 和 浏览 器 组 合 中 执 
行 相同 的 测试 用 例 ,在 执行 后 核对 结果 并 将 兼容 性 十 人 表格 中 。 


表 9-10 浏览 器 兼容 表 


Netscape Netscape Internet Internet 


浏览 器 


Communicatior Communicatior Explorer Explorer 


公 
于 站 4.5 4.7 4.01 5.0 


Windows 98 
Windows 2000 
Windows NT 
Windows XP 
Windows NE 


Linux - 全 
UNIX 
iMac 

Mac OS X 


3. 打印 机 测试 

用 户 可 能 会 将 网 页 打印 下 来 。 因 此 网 页 在 设计 的 时 候 要 考虑 到 打印 问题 ,注意 节约 
纸张 和 油墨 。 有 不 少 用 户 喜欢 阅读 而 不 是 盯 着 屏幕 ,因此 需要 验证 网 页 打印 是 否 正常 。 
有 时 在 屏幕 上 显示 的 图 片 和 文本 的 对 齐 方式 可 能 与 打印 出 来 的 东西 不 一 样 。 测 试 人 员 至 
少 需要 验证 订单 确认 页 面 打印 是 正常 的 。 

4. 组 合 测试 

最 后 需要 进行 组 合 测试 。600X 800 的 分 辩 率 在 MAC 机 上 可 能 不 错 ,但 是 在 IBM 
兼容 机 上 却 很 难看 。 在 IBM 机 器 上 使 用 Netscape 能 正常 显示 ,但 却 无 法 使 用 Lynx 来 
浏览 。 

如 果 是 内 部 使 用 的 Web 站 点 ,测试 可 能 会 轻松 一 些 。 如 果 公 司 指定 使 用 某 个 类 型 的 
浏览 器 ,那么 只 需 在 该 浏览 器 上 进行 测试 。 如 果 所 有 的 人 都 使 用 Tl 专线 ,可 能 不 需要 测 
试 下 载 施加 。( 但 需要 注意 的 是 ,可 能 会 有 员工 从 家 里 拨号 进入 系统 ) 有 些 内 部 应 用 程 
序 ,开发 部 门 可 能 在 系统 需求 中 声明 不 支持 某 些 系统 而 只 支持 那些 已 设置 的 系统 。 但 是 ， 
理想 的 情况 是 ,系统 能 在 所 有 机 器 上 运行 ,这 样 就 不 会 限制 将 来 的 发 展 和 变动 。 

可 以 根据 实际 情况 ,采取 等 价 划 分 的 方法 , 列 出 兼容 性 矩阵 。 


5. 兼容 性 测试 
兼容 性 测试 用 例如 表 9-11 所 示 。 
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表 9-11 兼容 性 测试 用 例 示例 
测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 
一 | 将 网 站 而 大 到 收藏 天 中 会 re 
et Web 页 面 二 | 网 站 正常 打开 和 运行 “| 一 致 /不 一 致 
9.24 ”| 打开 菜 个 站 点 的 多 个 会 话 | We 页面 二 | 每 个 会 话 部 是 可 用 的 ”| 一 致 /不 一 至 
9.25 | 使 用 浏览 器 的 打印 功能 Web 页 面 一 人 季 | 一 致 /不一致 
创建 二 个 We 页 面 的 快捷 
9. 26 键 ,在 结束 会 话 后 点 击 该 快 | Web 页 面 一 网 站 正常 打开 和 运行 一 致 /不 一 致 
捷 键 


9.7 ”数据库 测试 


在 Web 应 用 技术 中 ,数据 库 具有 非常 重要 的 作用 ,数据 库 为 Web 应 用 系统 的 管理 、 
运行 查询 和 实现 用 户 对 数据 存储 的 请 求 等 提供 空间 。 在 Web 应 用 中 ,最 常用 的 数据 库 
类 型 是 关系 型 数据 库 , 可 以 使 用 SQL 对 信息 进行 处 理 。 

数据 库 测试 是 Web 网 站 测试 的 一 个 基本 组 成 部 分 。 网 站 把 相关 的 数据 和 信息 存储 
在 数据 库 中 ,从 而 提高 搜索 效率 。 很 多 站 点 把 用 户 的 输入 数据 也 存放 在 数据 库 中 。 

对 于 测试 人 员 ,要 真正 了 解 后 台数 据 库 的 内 部 结构 和 设计 概念 ,制定 详细 的 数据 库 测 
试 计划 ,至 少 能 在 程序 的 某 个 流程 点 上 并 发 地 查询 数据 库 。 


1. 数据 库 测 试 的 主要 因素 

数据 库 测试 的 主要 因素 有 : 数据 完整 性 、 数 据 有 效 性 和 数据 操作 和 更 新 。 

。 数据 的 完整 性 : 测试 的 重点 是 检测 数据 损坏 程度 。 开 始 时 ,损坏 的 数据 很 少 ,但 
随 着 时 间 的 推移 和 数据 处 理 次 数 的 增多 ,问题 会 越 来 越 严 重 。 设 定 适当 的 检查 点 
可 以 减轻 数据 损坏 的 程度 。 比 如 ,检查 事务 日 志 以 便 及 时 掌握 数据 库 的 变化 
情况 。 

。 数据 有 效 性 : 数据 有 效 性 能 确保 信息 的 正确 性 ,使 得 前 台 用 户 和 数据 库 之 间 传 送 
的 数据 是 准确 的 。 在 工作 流 上 的 变化 点 上 检测 数据 库 , 跟 踪 变 化 的 数据 库 , 判 断 
其 正确 性 。 

， 数 据 操作 和 更 新 : 根据 数据 库 的 特性 ,数据 库 管理 员 可 以 对 数据 进行 各 种 不 受 限 
制 的 管理 操作 。 具 体 包括 : 增加 记录 、 删 除 记录 、 更 新 某 些 特定 的 字段 。 


2. 数据 库 测 试 的 相关 问题 
除了 上 面 的 数据 库 测试 因素 ,测试 人 员 需 要 了 解 的 相关 问题 有 : 


。 数据 库 的 设计 概念 ; 
。 数据 库 的 风险 评估 ; 
。， 了 解 设计 中 的 安全 控制 机 制 ; 
。 了解 哪些 特定 用 户 对 数据 库 有 访问 权限 ; 


。， 了 解数 据 的 维护 更 新 和 升级 过 程 ; 
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。 当 多 个 用 户 同时 访问 数据 库 处 理 同一 个 问题 ,或 者 并 发 查询 时 ,确保 可 操作 性 ; 

。 确保 数据 库 操作 能 够 有 足够 的 空间 处 理 全 部 数据 , 当 超出 空间 和 内 存 容量 时 能 够 
启动 系统 扩展 部 分 。 

围绕 上 述 的 测试 因素 和 测试 的 相关 问题 ,就 可 以 设计 具体 的 数据 库 测试 用 例 了 。 


3. 测试 用 例 


在 学 校 的 网 站 上 ,成 绩 查 询 系统 是 一 个 常见 的 Web 程序 。 学 生 可 以 通过 浏览 器 页 面 
访问 Web 服务 器 , Web 服务 器 再 从 数据 库 服务 器 上 读 取 数据 。 
如 表 9-12 所 示 是 一 个 学 生 基础 课 成 绩 表 的 结构 示例 。 这 里 定义 了 表 的 各 项 字段 名 、 


字段 类 型 及 其 含义 。 
表 9-12 学 生成 绩 表 的 结构 示例 

字段 名 字段 类 型 含 义 注释 
S_No 整 型 学 号 非 空 
S_Name 字符 串 类 型 学 生 姓 名 非 空 
S_Dep 字符 串 类 型 所 在 系 
S_Class 字符 串 类 型 所 在 班级 
M_Score 数值 型 数学 成 绩 
E_Score 数值 型 英语 成 绩 
C_Score 数值 型 计算 机 成 绩 


如 表 9-13 所 示 是 对 应 的 数据 库 测 试用 例 示 例 。 实 际 测试 结果 和 期 望 结果 是 否 一 致 


要 取决 于 数据 库 的 性 能 高 低 。 
表 9-13 数据库 测试 用 例 示例 
测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 
输出 该 学 号 对 应 学 
代 流 屋 f 一 一 一 
9. 27 指定 学 号 来 查询 成 绩 S_No 生 的 所 有 成 绩 情况 致 /不 一 致 
9 28 | 指定 一 个 有 效 且 不 重 名 的 | 。 s Nu _ | 输出 该 学 生 的 所 有 | 下 /不下 
- 学 生 姓 名 来 查询 成 绩 ES 成 绩 情况 
指定 一 个 有 效 且 重 名 的 学 输出 该 学 生 的 所 有 
9. 29 S_Name= 一 致 /不 一 致 


生 姓 名 来 查询 成 绩 


成 绩 情 况 
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续 表 
测试 用 例 号 操作 描述 数 据 期 望 结果 实际 结果 
指定 一 个 不 存在 的 学 生 姓 学 生 记录 没有 找到 ， 
9. 30 名 来 查询 成 绩 S Name= 建议 重新 输入 致 /不 一 致 
指定 一 个 有 效 的 学 生 姓 名 ne 
9.31 。 | 和 所 在 班级 组 合 条 件 来 查 | Se ab 一 致 /不 一 致 
ass 二 悦 
询 该 学 生 的 相关 成 绩 - 
指定 一 个 有 效 的 学 生 姓 名 | 、N 系 别 没有 找到 ,但 列 
9.32 。 | 和 一 个 不 存在 的 班级 来 查 | Sci- 出 该 学 生 的 所 有 成 | 一 致 /不 一 至 
询 该 学 生 的 相关 成 绩 ee 绩 情况 
指定 一 个 有 效 的 学 生 姓名 
S_N: 一 出 站 
9.33 。 | 和 所 在 系 别 组 合 条 件 来 查 | Se ee 一 致 /不 一致 
询 该 学 生 的 相关 成 绩 2 - 
指定 一 个 有 效 的 学 生 姓名 | 、N 系 别 没有 找到 ,但 列 
9.34 。 | 和 一 个 不 存在 的 系 别 来 查 | Ce 出 该 学 生 的 所 有 成 | 一 致 /不 一 至 
询 该 学 生 的 相关 成 绩 ES 绩 情 况 
1. 根据 学 号 查询 到 该 学 生 ee 
的 英语 成 绩 [ edn 半生 英语 
9. 35 人 人 二 2. 更 新 数据 库 一 致 /不 一 致 
生 的 英语 成 绩 E_Score= , Re 
Oe 3. 给 出 该 学 生 更 新 
3. 根据 学 号 再 次 查询 该 学 所 衣 训 
生 的 英语 成 绩 
S_No= 
并 发 执行 以 下 操作 : S$: Naniee 
1. 数据 库 管理 员 增加 一 名 | S_Dep= 查询 结果 可 能 给 出 
9.36 新 同学 的 记录 S_Class= 不 完整 的 相关 信息 ,| 一 致 /不 一 臻 
2. 用 户 查询 这 名 新 同学 的 | M_Score 一 比如 有 空 的 字段 
相关 信息 E_Score=— 
C_Score= 
(要 查询 的 ) 字 | 在 可 以 接受 的 响应 
个 日 | 四 | 行 日 A] 
9. 37 DA 段 名 一 时 间 内 ,所 有 用 户 得 | 一 致 /不 一 致 
用 户 数 一 到 正确 的 显示 结果 
小 结 


本 章 介 绍 了 Web 网 站 测试 的 几 个 方面 和 相关 的 测试 技术 。 
Web 测试 相对 于 非 Web 测试 来 说 都 是 更 具 挑 战 性 的 工作 。 用 户 对 Web 页 面 质量 
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有 很 高 的 期 望 。 

功能 测试 是 检测 网 站 功能 的 正确 性 ,其 中 包括 页 面 内 容 测 试 .链接 测试 .表单 测试 、 
Cookies 测试 和 设计 语言 测试 等 。 

性 能 测试 确保 网 站 服务 器 在 规定 的 参数 内 响应 浏览 器 的 请 求 。 作 为 性 能 测试 的 一 部 
分 ,负载 测试 评估 网 站 满足 负载 要 求 的 能 力 。 负 载 测试 评估 系统 在 处 理 大 量 用 户 的 并 发 
要 求 时 的 功能 如 何 。 压 力 测 试 是 使 系统 能 满足 不 同 的 负载 。 连 接 速 度 测试 则 是 对 打开 网 
页 的 响应 速度 测试 。 

安全 测试 是 为 了 确保 重要 和 机 密 信息 的 安全 性 ,试图 找到 应 用 程序 的 安全 缺陷 。 

可 用 性 测试 是 指 通过 观察 用 户 与 站 点 的 交互 ,评估 一 个 站 点 是 否 用 户 友 好 。 其 中 导 
航 测试 是 指 通过 访问 页 面 、. 图 像 .链接 及 其 他 页 面 组 件 ,确保 用 户 可 以 完成 希望 的 任务 。 

配置 和 兼容 性 测试 保证 了 应 用 程序 在 各 种 硬件 和 软件 环境 下 的 功能 都 是 正确 的 。 

数据 库 测试 检查 存储 数据 的 完整 性 ,而 存储 数据 通常 是 指 网 站 使 用 的 产品 信息 。 


习 题 


. 简 述 Web 网 站 的 测试 内 容 。 

. 功能 测试 包括 哪些 方面 ? 

.负载 /压力 测试 的 作用 是 什么 ? 

. 概括 安全 性 测试 中 的 登录 测试 内 容 。 
. 简 述 兼容 性 测试 。 


wD- 
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软件 测试 职业 


本 章 概述 
本 章 曾 述 了 软件 测试 职业 和 职位 。 介 绍 了 获取 软件 测试 资源 的 途径 并 对 软件 测试 工 
程 师 的 素质 提出 了 要 求 。 


10.1 软件 测试 职业 和 职位 


软件 测试 工作 随 着 软件 产品 的 开发 所 起 的 作用 越 来 越 重 要 ,这 是 软件 行业 二 十 几 年 
的 实践 所 证 明 的 一 个 道理 。 

以 微软 公司 为 例 ,微软 以 前 的 产品 时 时 会 发 生 崩 溃 , 死 机 等 现象 ,而 今天 的 产品 相 比 
5 年 前 的 产品 ,不 仅 功 能 要 强大 得 多 ,稳定 性 也 要 好 得 多 。 这 是 因为 微软 公司 重视 测试 工 
作 ,测试 人 员 越 来 越 多 ,如 今 微 软 的 软件 测试 人 员 是 开发 人 员 的 1.5 一 2.5 倍 。 其 次 ,测试 
人 员 越 来 越 有 经 验 ,测试 工作 也 就 越 做 越 好 。 正 是 由 于 清晰 地 认识 到 了 软件 测试 的 重要 
性 ,微软 的 产品 质量 才 有 了 明显 的 提高 。 

最 初 ,微软 公司 认为 测试 不 重要 ,重要 的 是 开发 人 员 。 通 常 一 个 团队 中 有 几 百 个 开发 
人 员 ,但 只 有 几 个 测试 人 员 ,并 且 开 发 人 员 的 待遇 要 比 测试 人 员 的 待遇 高 得 多 。 经 过 多 年 
的 实践 后 ,微软 公司 发 现 , 去 修正 那些 出 现 问题 的 产品 所 花 的 钱 , 比 多 聘用 几 个 测试 人 员 
的 费用 要 多 得 多 ,所 以 ,开始 不 断 地 聘用 测试 人 员 。 

在 当前 中 国 的 软件 业 迅速 发 展 , 并 且 在 向 国际 软件 产业 市 场 迈 进 的 进程 中 ,在 软件 开 
发 过 程 越 来 越 工程 化 的 规范 下 ,对 软件 测试 的 重视 程度 也 空前 提高 和 强化 ,软件 开发 过 程 
对 专业 测试 人 员 的 需求 也 不 断 地 增加 。 目 前 国内 专业 化 的 软件 测试 人 员 无 论 从 数量 上 还 
是 质量 上 ,与 国外 同行 业 相 比 均 明显 不 足 。 

这 样 就 给 从 事 软 件 测试 工作 带 来 了 许多 就 业 机 会 。 当 前 软件 测试 技术 的 职业 市 场 表 
明 , 具 有 一 定 测 试 经 验 的 软件 测试 工程 师 很 受 市 场 青 睐 ,供不应求 。 目 前 ,软件 测试 工作 
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越 来 越 得 到 足够 重视 ,现在 测试 人 员 的 待遇 和 开发 人 员 的 待遇 非常 接近 。 

软件 开发 时 ,首先 要 组 建 一 个 开发 团队 ,要 决定 这 个 团队 应 该 有 多 少 人 参加 ,需要 什 
么 技术 的 人 员 参 加 ,项 目 经 理 是 谁 , 多 少 个 开发 人 员 ? 多 少 个 测试 人 员 ? 多 少 个 程序 经 
理 ? 这 些 问 题 搞 清楚 了 ,开发 团队 就 基本 建立 起 来 了 。 

10.1.1 测试 团队 的 基本 构成 

测试 团队 的 构成 ,从 理论 上 说 ,和 其 规模 没有 多 大 关系 ,也 就 是 人 们 常 说 的 “麻雀 虽 
小 ,五 脏 俱 全 ”。 如 果 项 目 很 小 ,测试 小 组 就 一 个 人 ,那么 这 个 人 就 要 扮演 不 同 的 角色 。 一 
般 来 看 ,一 个 比较 健全 的 测试 部 门 应 该 具有 下 面 这 些 角 色 。 

。 测试 经 理 : 负责 人 员 招 聘 .培训 、 管 理 ,资源 调配 、 测 试 方法 改进 等 。 

。 实验 室 管理 人 员 : 负责 设置 .配置 和 维护 实验 室 的 测试 环境 ,主要 是 负责 服务 器 

和 网 络 环境 等 。 

。 内 审 员 : 负责 审查 流程 ,并 提出 改进 流程 的 建议 ; 建立 测试 文档 所 需 的 各 种 模板 ， 
检查 软件 缺陷 描述 及 其 他 测试 报告 的 质量 等 。 
测试 组 长 : 是 相关 的 业务 专家 ,负责 项 目的 管理 ,测试 计划 的 制订 \ 项 目 文档 的 
审查 .测试 用 例 的 设计 和 审查 ,任务 的 安排 ,负责 和 项 目 经 理 . 开 发 组 长 的 沟 

。 一 般 ( 初 级 ?测试 工程 师 : 执行 测试 用 例 和 相关 的 测试 任务 。 

对 于 比较 大 规模 的 测试 团队 ,测试 工程 师 分 为 三 个 层次 : 初级 测试 工程 师 、 测 试 工程 
师 、 资 深 (高 级 ) 测 试 工程 师 等 ,同时 还 设立 自动 化 测试 工程 师 、 系 统 测试 工程 师 和 架构 工 
程 师 。 

对 于 规模 很 小 的 测试 小 组 ,可 能 没有 设置 测试 经 理 , 只 有 测试 组 长 ,这 时 测试 组 长 
承担 测试 经 理 的 部 分 责任 ,如 参加 面试 工作 、 资 源 管理 .团队 发 展 等 ,并 且 要 做 内 审 员 
的 工作 ,检查 软件 缺陷 描述 及 其 他 测试 报告 的 质量 等 。 资 深 测试 工程 师 不 仅 要 负责 设 
计 规 格 说 明 书 的 审查 ,测试 用 例 的 设计 等 ,还 要 设置 测试 环境 , 即 承 担 实验 室 管理 人 员 的 
责任 。 

10.1.2 测试 人 员 职位 及 其 责任 

在 上 面 介绍 了 团队 的 基本 构成 ,为 了 更 好 地 理解 团队 中 的 每 位 成 员 所 起 的 作用 ,就 需 
要 清楚 不 同 的 角色 所 应 该 承担 的 责任 。 

主要 角色 的 责任 , 先 从 一 般 ( 初 级 ?测试 工程 师 开 始 , 再 介绍 资深 测试 工程 师 , 最 后 到 
测试 经 理 。 这 个 过 程 有 利于 读者 理解 他 们 的 责任 ,测试 工程 师 虽 然 和 初级 测试 工程 师 责 
任 不 一 样 ,但 可 以 肯定 的 是 测试 工程 师 能 做 好 所 有 要 求 初级 测试 工程 师 做 好 的 工作 。 

不 同 层次 的 测试 工程 师 责 任 有 一 定 的 区 别 , 但 都 是 技术 工作 ,主要 任务 是 设计 和 执行 
各 种 测试 任务 ,是 测试 工作 的 基础 。 
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下 面 对 软 件 测试 各 职位 及 其 责任 做 详细 的 介绍 。 

(1) 初级 测试 工程 师 

初级 测试 工程 师 的 责任 比较 简单 ,还 不 具备 完全 独立 的 工作 能 力 ,需要 测试 工程 师 或 
资深 测试 工程 师 的 指导 ,要 求 比较 低 ,主要 有 下 列 7 项 责任 。 

。 了解 和 熟悉 产品 的 功能 、 特 性 等 ; 

。 验证 产品 在 功能 .界面 上 是 否 和 产品 规格 说 明 书 一 致 ; 

。 按照 要 求 ,执行 测试 用 例 ,进行 功能 测试 .验收 测试 等 ,并 能 发 现 所 暴露 的 问题 ; 

。 清楚 地 描述 所 出 现 的 软件 问题 ; 

。 努力 学 习 新 技术 和 软件 工程 方法 ,不断 提高 自己 的 专业 水 平 ， 

。 使 用 简单 的 测试 工具 ， 

。 接受 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

(2) 测试 工程 师 

测试 工程 师 的 责任 相对 多 些 ,熟悉 测试 流程 .测试 方法 和 技术 ,参与 自动 化 测试 ,具有 
独立 的 工作 能 力 , 但 基本 上 以 执行 测试 为 主 ,主要 责任 如 下 : 

。 熟悉 产品 的 功能 ,特性 ,审查 产品 规格 说 明 书 ; 

。 根据 需求 文档 或 设计 文档 ,可 以 设计 功能 方面 的 测试 用 例 ; 

。 根据 测试 用 例 , 执 行 各 种 测试 ,发 现 所 暴露 的 问题 ; 

。 全 面 使 用 测试 工具 ,包括 测试 脚本 的 编写 ; 

。 安装 ,设置 简单 的 系统 测试 环境 ; 

。 报告 所 发 现 的 软件 缺陷 ,审查 软件 缺陷 ,跟踪 缺陷 修改 的 情况 ,直到 缺陷 关闭 ; 

。 写 测试 报告 ; 

。 负责 对 初级 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

(3) 资深 测试 工程 师 

资深 测试 工程 师 不 仅 具 有 良好 的 技术 、 产 品 分 析 能 力 、 解 决 问题 能 力 、 丰 富 的 测试 工 
作 经 验 , 而 且 有 较 好 的 编程 、 自 动 化 测试 经 验 ,熟悉 测试 流程 测试 方法 和 技术 ,解决 测试 
经 理工 作 中 可 能 过 到 的 各 种 技术 问题 。 主 要 责任 如 下 : 

。 负责 系统 一 个 或 多 个 模块 的 测试 工作 ; 

。 制订 某 个 模块 或 某 个 阶段 的 测试 计划 、 测 试 策略 ; 
设计 测试 环境 所 需 的 系统 或 网 络 结构 ,安装 ,设置 复杂 的 系统 测试 环境 ; 
。 熟悉 产品 的 功能 、 特 性 ,审查 产品 规格 说 明 书 ,并 提出 改进 要 求 ; 
。 审查 代码 ; 
。 验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 ; 
。 根据 需求 文档 或 设计 文档 ,设计 复杂 的 测试 用 例 ; 
。 负责 对 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 
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(4) 测试 实验 室 管理 员 


测试 实验 室 管 理 员 主要 负责 建立 ,设置 和 维护 测试 环境 ,保证 测试 环境 的 稳定 运行 ， 
其 主要 责任 如 下 : 

。 负责 测试 环境 所 需 的 网 络 规划 和 建设 ,维护 网 络 的 正常 运行 ; 

。 建立 ,设置 和 维护 测试 环境 所 需 的 应 用 服务 器 和 软件 平台 ; 

。 申请 所 需要 的 新 的 硬件 资源 、 软 件 资源 ,协助 有 关 部 门 进行 采购 .验收 ; 

。 对 使 用 实验 室 的 硬件 .软件 资源 的 权限 进行 设计 、 设 置 ,保证 其 安全 性 ; 

。 安装 新 的 测试 平台 ,被 测试 的 系统 等 ; 

。 优化 测试 环境 ,提高 测试 环境 中 网 络 .服务 器 和 其 他 设备 运行 的 性 能 。 

(5) 软件 包 构 建 或 发 布 工程 师 

发 布 工程 师 在 QA 工作 中 起 着 很 重要 的 角色 ,负责 测试 产品 的 上 载 . 打 包 和 发 布 ,其 
主要 责任 是 : 

。 负责 源 程序 代码 管理 系统 的 建立 ,管理 和 维护 ， 

。 保证 文件 名 定义 规范 ,建立 合理 的 程序 文件 结构 和 存储 目录 结构 ; 

。 为 程序 的 编译 .连接 等 软件 包 构造 建立 自动 处 理 文件 ; 

。 保证 测试 最 新 的 产品 包 上 传 到 相应 的 服务 器 上 ,并 确认 各 模块 或 组 件 之 间 相 互 

匹配 ; 
。 每 天 为 各 项 目 新 的 或 修改 的 代码 重新 构造 新 的 软件 包 。 确 保 不 含 病毒 ,不 缺 图 片 
和 各 种 文件 ; 

。 负责 软件 包 的 接收 ,发 送 、 存 储 和 备份 等 。 

(6) 测试 组 长 

测试 组 长 一 般 具 备 资深 测试 工程 师 的 能 力 和 经 验 ,可 能 在 技术 上 相对 弱 些 ,不 是 小 组 
内 最 强 的 ,其 责任 偏重 测试 项 目的 计划 、 跟 踪 和 管理 ,同时 负责 测试 小 组 的 团队 的 管理 和 
发 展 。 其 主要 责任 如 下 : 
负责 测试 小 组 的 管理 或 参与 测试 团队 的 管理 ; 
。 负责 一 个 独立 的 测试 项 目 ; 
。 制订 整个 项 目的 测试 计划 ,测试 策略 ,包括 风险 评估 日 程 表 安排 等 ; 
。 熟悉 产品 的 功能 、 特 性 ,审查 产品 规格 说 明 书 ,并 提出 改进 意见 ; 
。 审查 系统 ,程序 设计 说 明 书 ; 
。 验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 ; 
实施 软件 测试 ,并 对 软件 问题 进行 跟踪 分 析 和 报告 ,推动 测试 中 发 现 的 问题 及 时 
合理 地 解决 ; 
编写 项 目的 整体 测试 报告 ,保证 产品 质量 ; 
对 竞争 者 的 产品 进行 分 析 , 提 出 对 软件 的 进一步 改进 的 要 求 ,并 且 评 估 改 进 方案 
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是 否 合理 ; 
。 负责 测试 项 目 内 部 的 资源 .任务 安排 ; 
。 监督 测试 流程 的 执行 ,并 将 执行 过 程 中 所 发 现 的 问题 反馈 给 测试 经 理 或 项 目 经 理 ; 
。 为 团队 成 员 提供 技术 指导 ,协助 主管 或 测试 经 理工 作 。 
(7) 测试 经 理 
测试 经 理 的 主要 工作 在 团队 资源 和 项 目 等 管理 上 ,不 同 于 测试 组 长 。 测 试 组 长 主要 
集中 在 项 目 管理 上 ,一 般 不 负责 测试 人 员 的 招聘 流程 定义 等 管理 工作 ,而 且 偏 重 技术 。 
测试 经 理 对 产品 的 质量 负 全 面 责任 ,有 责任 向 公司 最 高 管理 层 反 映 软件 开发 过 程 中 管理 
问题 或 产品 中 的 质量 问题 ,使 公司 能 全 面 掌 握 生 产 和 质量 状况 。 其 主要 责任 如 下 : 
。 负责 整个 测试 团队 或 部 门 的 管理 ,包括 测试 岗位 责任 的 定义 ,组 织 团队 结构 的 建 
立 和 优化 ,团队 的 建设 和 发 展 ,培训 活动 的 组 织 , 员 工 的 激励 等 ; 
。 负责 一 个 完整 产品 的 软件 测试 和 质量 保证 等 工作 ,包括 项 目 组 长 的 指定 、 项 目 资 
源 的 安排 ,项 目 进 度 的 跟踪 、 项 目 审查 和 总 结 等 ; 
负责 测试 部 门 年 度 / 季 度 计 划 及 预算 的 编写 .实施 和 评估 ; 
。 促进 质量 文化 的 普及 ,使 整个 开发 团队 的 每 位 成 员 都 有 一 个 正确 的 客户 和 质量 
观念 ; 
。 负责 测试 人 员 的 招聘 .考核 等 方面 的 工作 ,协助 人 力 资源 部 门 ; 
。 定义 .实施 软件 测试 流程 或 整个 开发 周期 流程 ,并 收集 ` 处 理 流 程 实施 中 所 存在 问 
题 ,最 终 不 断 改进 流程 ; 
。 审查 项 目的 测试 计划 ,测试 策略 等 ,包括 资源 调度 和 平衡 、 风 险 评 估 等 ; 
。 和 其 他 部 门 协调 ,参加 多 方 会 议 解决 产品 规格 说 明 ,设计 等 问题 ; 
。 审查 系统 ,程序 设计 说 明 书 ; 
。 实施 软件 测试 ,并 对 软件 问题 进行 跟踪 分 析 和 报告 ,推动 测试 中 发 现 的 问题 能 及 
时 合理 地 解决 ; 
审查 项 目的 测试 报告 ,进行 产品 质量 的 分 析 ,提交 质量 分 析 报 告 ; 
。 对 竞争 者 的 产品 进行 分 析 , 提 出 对 软件 进一步 改进 的 要 求 并 且 评 估 改 进 方案 是 否 
合理 。 


10.2 ”软件 测试 资源 的 获取 途径 


软件 测试 工作 随 着 软件 产品 开发 的 规范 化 .工程 化 已 经 越 来 越 得 到 重视 。 要 使 得 软 
件 产品 质量 得 到 保证 ,并 能 在 市 场 竞 争 中 获胜 ,软件 测试 就 显得 尤为 重要 。 要 获得 快捷 可 
靠 的 软件 测试 资源 ,一 般 可 以 从 正规 的 培训 会 议 ,相关 的 网 站 及 从 事 软 件 测试 的 专业 组 织 
这 三 种 途径 中 获取 。 
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10.2.1 正规 的 培训 会 议 

一 般 获取 软件 测试 资源 是 参加 正规 的 培训 会 议 。 美国 及 英 、 法 等 国 通常 每 年 都 会 在 
召开 类 似 的 国际 会 议 , 这 些 会 议 为 软件 测试 人 员 提 供 了 良好 的 获取 资源 的 机 会 ,会 议 资料 
包括 最 基础 的 软件 测试 内 容 及 技术 含量 极 高 的 新 技术 。 它 提供 了 软件 测试 的 同行 进行 面 
对 面 的 交流 ,讨论 解决 的 相关 方案 及 策略 。 一 般 比较 规范 的 会 议 有 

(1) 国际 软件 测试 会 议 

由 美国 质量 保证 学 会 主办 ,由 来 自 软 件 测试 和 质量 保证 行业 的 专家 进行 讲授 。 

(2) 软件 测试 分 析 和 评审 


(3) 软件 质量 国际 会 议 

由 美国 质量 协会 软件 分 会 主办 ,也 是 提供 从 事 软件 测试 和 质量 保证 人 士 交流 的 机 会 。 

(4) 软件 测试 国际 会 议 

由 软件 质量 系统 主办 ,是 关于 软件 测试 方面 的 演示 、 指 导 、 讨 论 和 经 验 交 流 的 会 议 。 

(5) 软件 质量 世界 会 议 

由 国际 软件 质量 协会 主办 , 它 是 由 学 术 及 产业 两 个 方面 的 顶尖 专家 组 成 ,交流 软件 质 
量 ,软件 过 程 改 进 及 软件 开发 等 方面 的 见解 及 经 验 。 
10.2.2 相关 的 网 络 

因特网 上 拥有 关于 软件 测试 的 丰富 信息 。 虽 然 搜索 “software testing” 或 者 “software 
test” 总 可 以 找到 一 些 资料 ,但 是 下 列 网 站 可 以 作为 人 门 向 导 : 

(1) Bug Net(www. bugnet. com) 

公布 在 商业 软件 中 发 现 的 软件 缺陷 ,并 指出 相应 的 修复 措施 。 

(2) Software Testing Hotlist(www. io. com/ ~ wazmo/qa) 

列 出 了 许多 与 软件 测试 相关 的 网 站 和 文章 的 链接 。 

(3) Software Testing Online Resources(www. mtsu. edu/~ storm) 

自称 一 系列 软件 测试 联机 资源 …… 旨 在 成 为 软件 测试 研究 者 和 从 业者 的 门户 网 站 。 

(4) QA Forums(www. qaforums. com) 

提供 软件 测试 ,自动 化 测试 ,测试 管理 ,测试 工具 等 主题 的 即时 讨论 。 

(5) comp. risks 新 闻 组 描述 和 分 析 近 期 的 软件 失败 。 
10.2.3 ”从 事 软 件 测试 的 专业 组 织 

从 事 软 测试 和 软件 质量 保证 的 一 些 非 商业 性 的 组 织 , 也 是 获取 软件 测试 资源 的 一 种 
途径 ,他 们 的 网 站 提供 了 其 专业 范围 的 详细 信息 。 

(1) 美国 软件 测试 协会 

美国 软件 测试 协会 是 个 非 僵 利 性 专业 服务 组 织 ,专注 于 软件 测试 的 理解 和 实践 的 推 
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动 。 他 们 的 文档 提供 了 软件 测试 的 丰富 信息 一 一 强调 实践 而 不 是 理论 。 
(2) 美国 质量 委员 会 
发 表 质 量 方面 的 刊物 和 文章 ,并 管理 认证 质量 工程 师 和 认证 软件 质量 工程 师 的 任命 。 
(3) 美国 计算 机 协会 
已 拥有 教育 和 科学 计算 方面 的 80000 多 个 会 员 。 
(4) 软件 质量 委员 会 
其 目标 是 成 为 那些 志 在 把 提高 “质量 ”作为 软件 通用 目标 的 人 们 的 协会 。 


10.3 软件 测试 工程 师 的 素质 要 求 


软件 测试 是 一 项 复杂 而 艰巨 的 任务 ,软件 测试 工程 师 的 目标 是 尽早 发 现 软件 缺陷 ,以 
便 降 低 修 复 成 本 。 软 件 测试 员 是 客户 的 眼睛 ,是 最 早 看 到 并 使 用 软件 的 人 ,所 以 应 当 站 在 
客户 的 角度 ,代表 应 用 客户 说 话 , 及 时 发 现 问 题 ,力求 使 软件 功能 趋 于 完善 。 

很 多 比较 成 熟 的 软件 公司 都 把 软件 测试 视 为 高 级 技术 职位 。 软 件 测试 员 的 工作 与 程 
序 员 的 工作 对 软件 开发 所 起 的 作用 是 相当 的 。 虽 然 软件 测试 员 不 一 定 是 一 个 优秀 的 程序 
员 ,但 是 作为 一 个 出 色 的 软件 测试 员 应 当 具 备 丰 富 的 编程 知识 ,掌握 软件 编程 的 基础 内 
容 , 了 解 软件 编程 的 过 程 , 这 无 疑 对 出 色 完 成 软件 测试 任务 具有 很 大 的 帮助 。 

通常 软件 测试 工程 师 应 具备 如 下 素质 : 

(1) 具有 较 强 的 沟通 能 力 

优秀 的 测试 工程 师 必须 能 够 同 测试 涉及 的 所 有 人 进行 沟通 ,具有 与 技术 和 非 技术 人 
员 的 交流 能 力 。 既 要 可 以 和 用 户 交流 ,又 要 能 同 开发 人 员 沟 通 ,不 幸 的 是 这 两 类 人 没有 共 
同 语言 。 和 用 户 交流 的 重点 必须 放 在 系统 可 以 正确 地 处 理 什 么 和 不 可 以 处 理 什么 上 , 尽 
量 不 使 用 专业 术语 。 而 和 开发 者 沟通 时 ,尽量 要 使 用 专业 术语 ,这 对 用 户 反 馈 的 相同 信 
息 ,测试 人 员 必 须 重 新 组 织 ,以 另 一 种 方式 表达 出 来 ,测试 小 组 的 成 员 必 须 能 够 同等 地 同 
用 户 和 开发 者 沟通 。 

(2) 掌握 比较 全 面 的 技术 

就 总 体 而 言 ,开发 人 员 对 那些 不 懂 技 术 的 人 持 一 种 轻视 的 态度 。 一 旦 测试 小 组 的 某 
个 成 员 做 出 了 一 个 比较 明显 的 错误 断定 ,可 能 会 被 夸张 地 到 处 传扬 ,那么 测试 小 组 的 
可 信 度 就 会 受到 影响 ,其 他 正确 的 测试 结果 也 会 受到 质疑 。 再 者 ,由 于 软件 错误 通常 
依赖 于 技术 ,或 者 至 少 受 构造 系统 所 使 用 的 技术 的 影响 ,所 以 测试 人 员 掌 握 编程 语言 、 
系统 构架 、 操 作 系统 的 特性 、 网 络 、. 表 示 层 ,数据 库 的 功能 和 操作 等 知识 ,应 该 了 解 系统 
是 怎样 构成 的 ,明白 被 测试 软件 系统 的 概念 、 技 术 . 要 建立 测试 环境 、 编 写 测试 脚本 ,又 
要 会 使 用 软件 工程 工具 。 要 做 到 这 些 , 需 要 有 几 年 以 上 的 编程 经 验 及 对 技术 和 应 用 领 
域 的 深刻 理解 。 
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(3) 做 优秀 的 外 交 家 

优秀 的 测试 人 员 必 须 能 够 同 测试 涉及 的 所 有 人 进行 良好 的 沟通 。 机 智 老 练 的 外 交手 
法 有 助 于 维护 与 开发 人 员 的 协作 关系 ,幽默 感 同 样 也 是 很 有 帮助 的 。 

测试 人 员 应 该 把 精力 集中 在 查找 错误 上 面 ,而 不 是 放 在 找 出 是 开发 小 组 中 哪个 成 员 
引入 的 错误 。 这 样 可 以 保证 测试 的 否定 性 结果 只 是 针对 产品 ,而 不 是 针对 编程 人 员 。 也 
就 是 说 要 使 用 一 种 公正 和 公平 的 方式 指出 具体 错误 ,这 对 于 测试 工作 是 有 益 的 。 一 般 来 
说 ,武断 地 对 产品 进行 攻击 是 错误 的 。 在 遇 到 狭 辩 的 情况 下 ,一 个 幽默 的 批评 将 是 很 有 帮 
助 的 。 

(4) 具有 挑战 精神 

优秀 的 测试 工程 师 在 开发 测试 用 例 时 使 用 的 方法 ,与 勘探 专家 在 一 个 山洞 中 摸索 
前 进 的 方法 相 类 似 。 虽 然 周 围 可 能 存在 大 量 死 路 ,但 是 测试 工程 师 要 具有 挑战 性 ,这 
样 才 会 促使 他 们 向 山洞 中 的 深 处 探索 ,向 一 切 没有 去 过 的 地 方 前 进 , 最 终 可 能 会 有 一 
个 大 发 现 。 

(5) 具有 准确 的 判断 力 

一 个 好 的 测试 工程 师 具 有 一 种 先天 的 敏感 性 及 准确 的 判断 力 ,并 且 还 能 尝试 着 通过 
一 些 巧 妙 的 变化 去 发 现 问 题 。 同 时 ,还 具有 强烈 的 质量 追求 ,对 细节 的 关注 能 力 。 测 试 人 
员 要 有 高 风险 区 的 判断 力 以 便 将 有 限 的 测试 针对 重点 环节 来 实现 。 

(6) 做 故障 排除 家 

可 以 想象 ,开发 人 员 会 尽 他 们 最 大 的 努力 将 所 有 的 错误 解释 过 去 ,测试 人 员 必 须 听 每 
个 人 的 说 明 ,但 必须 保持 高 度 警 惕 ,才能 做 出 决定 。 测 试 人 员 应 该 具有 自我 督促 能 力 , 才 
能 保证 每 天 的 工作 都 能 高 质量 完成 ,要 善于 发 现 问题 的 症结 并 及 时 清除 。 

(7) 要 有 充分 的 自信 心 和 耐心 

开发 人 员 指 责 测试 人 员 出 了 错 是 常 有 的 事 ,测试 工程 师 必 须 对 自己 的 观点 有 足够 的 
自信 心 , 对 自己 发 现 的 缺陷 有 信心 。 如 果 没 有 信心 或 受 开 发 人 员 影 响 过 大 ,测试 工作 就 缺 
乏 独 立 性 ,程序 中 的 漏洞 或 缺陷 容易 被 忽略 过 去 ,就 谈 不 上 保证 软件 产品 的 质量 。 

还 有 一 种 情况 也 是 常见 的 ,软件 产品 设计 规格 说 明 书 总 是 或 多 或 少 存在 一 些 逻 辑 问 
题 ,编程 人 员 和 测试 人 员 对 那些 有 问题 的 功能 存在 争议 ,这 时 候 信心 会 帮助 测试 人 员 发 现 
产品 设计 中 的 问题 。 

有 些 软件 测试 工作 需要 难以 置信 的 耐心 。 有 时 需要 花费 惊人 的 时 间 去 分 离 .识别 一 
个 错误 ,需要 对 其 中 一 个 测试 用 例 运行 几 十 遍 , 甚 至 几 百 遍 , 了 解 错误 在 什么 情况 或 什么 
平台 下 才 发 生 。 测 试 人 员 需 要 保持 平静 ,尤其 是 在 集中 注意 力 解 决 困难 问题 的 时 候 , 特 别 
是 在 测试 执行 阶段 , 面 对 成 百 上 千 个 测试 用 例 ,要 一 个 个 去 执行 ,还 要 在 不 同 的 测试 环境 
上 重复 ,耐心 是 必要 的 。 当 然 ,我们 尽量 使 用 测试 工具 去 完成 那些 重复 性 的 任务 。 
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小 结 


本 章 介绍 了 软件 测试 职业 的 相关 内 容 , 阐 述 了 软件 测试 职业 和 职位 及 软件 测试 资源 
的 获取 途径 ,以 及 对 软件 测试 工程 师 应 具备 的 基本 素质 要 求 。 软 件 测试 是 一 项 批判 性 的 
工作 , 随 着 当今 软件 规模 和 复杂 性 的 日 益 增 加 ,进行 专业 化 、 高 效 的 软件 测试 的 要 求 也 越 
来 越 高 ,从 事 软件 测试 人 员 的 数量 和 质量 都 在 提高 。 只 有 明确 了 软件 测试 工程 师 的 目标 
及 应 具备 的 素质 ,才能 做 一 个 优秀 的 软件 测试 人 员 。 同 时 ,也 为 从 事 软件 工作 的 人 员 提 供 
了 一 个 新 的 职位 发 展 机 会 。 


习 题 


. 简 述 软件 测试 资源 的 获取 途径 。 

. 简 述 软件 测试 工程 师 应 具备 的 素质 。 
. 软件 测试 员 的 目标 是 什么 ? 

. 谈 谈 你 对 今后 从 事 软件 职业 的 打算 。 
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